L
регионах ??? у тебя облако ?
Size: a a a
2020 March 17
MM
etcd в логах есть ~ «read ... took to many time”?
только это
Mar 17 08:29:52 m1-gcore-msk etcd[1247]: 2020-03-17 08:29:52.000757 I | etcdserver: start to snapshot (applied: 63027016, lastsnap: 63017015)
Mar 17 08:29:52 m1-gcore-msk etcd[1247]: 2020-03-17 08:29:52.043676 I | etcdserver: saved snapshot at index 63027016
Mar 17 08:29:52 m1-gcore-msk etcd[1247]: 2020-03-17 08:29:52.043778 I | etcdserver: compacted raft log at 63022016
Mar 17 08:29:52 m1-gcore-msk etcd[1247]: 2020-03-17 08:29:52.000757 I | etcdserver: start to snapshot (applied: 63027016, lastsnap: 63017015)
Mar 17 08:29:52 m1-gcore-msk etcd[1247]: 2020-03-17 08:29:52.043676 I | etcdserver: saved snapshot at index 63027016
Mar 17 08:29:52 m1-gcore-msk etcd[1247]: 2020-03-17 08:29:52.043778 I | etcdserver: compacted raft log at 63022016
MM
Mar 17 08:31:37 m1-gcore-msk etcd[1247]: 2020-03-17 08:31:37.034835 I | mvcc: store.index: compact 60348709
Mar 17 08:31:37 m1-gcore-msk etcd[1247]: 2020-03-17 08:31:37.039337 I | mvcc: finished scheduled compaction at 60348709 (took 3.247762ms)
Mar 17 08:31:37 m1-gcore-msk etcd[1247]: 2020-03-17 08:31:37.039337 I | mvcc: finished scheduled compaction at 60348709 (took 3.247762ms)
MM
мастера чисто мастера ?
нет, там парочка моих подов крутится
MM
но они ничего не жрут
GG
нет, там парочка моих подов крутится
что за парочка
EG
У тебя etcd сколько штук?
L
Покажи top с узла
MM
что за парочка
cert-manager
MM
и сборщик логов
MM
MM
У тебя etcd сколько штук?
1
MM
регионах ??? у тебя облако ?
нет, baremetal
MM
просто куча кластеров, разбросанных по миру
MM
маленьких в основном
EG
просто куча кластеров, разбросанных по миру
Стоп. 1 мастер и куча воркеров по миру, или в каждом дц свой мастер?
MM
Стоп. 1 мастер и куча воркеров по миру, или в каждом дц свой мастер?
нет
L
Предположение - кто то дергает API.
netstat -ntpa и попробовать поблочить внешние коннекты к APIMM
в каждом ДЦ свой кластер со своим мастером
MM
никакого общения между ДЦ нет