Size: a a a

Kubernetes — русскоговорящее сообщество

2020 September 03

В

Виктор in Kubernetes — русскоговорящее сообщество
Ребят, кто ставил этот чарт? https://github.com/helm/charts/tree/master/stable/prometheus я правильно понимаю, nodeExporter метрики должно собирать в прометеусе черз serviceDiscovery без допилов? У меня почему-то метрик нет, а в serviceDiscovery только один под который сам пром
источник

CO

Crash Override in Kubernetes — русскоговорящее сообщество
Alexander Vaskin
всем привет! собственно начался ни с того ни с сего FailedMount, используем storageos

I0902 19:59:12.492483   31894 mount_linux.go:296] fsck error fsck from util-linux 2.27.1
fsck.ext2: Transport endpoint is not connected while trying to open /var/lib/storageos/volumes/561715f0-3f43-64ff-9e7d-3d9fe69e48ff
/var/lib/storageos/volumes/561715f0-3f43-64ff-9e7d-3d9fe69e48ff:
The superblock could not be read or does not describe a valid ext2/ext3/ext4
filesystem.  If the device is valid and it really contains an ext2/ext3/ext4
filesystem (and not swap or ufs or something else), then the superblock
is corrupt, and you might try running e2fsck with an alternate superblock:
   e2fsck -b 8193 <device>
or
   e2fsck -b 32768 <device>

E0902 19:59:12.497152   31894 mount_linux.go:147] Mount failed: exit status 32
Mounting command: mount
Mounting arguments: -t ext4 -o defaults /var/lib/storageos/volumes/561715f0-3f43-64ff-9e7d-3d9fe69e48ff /var/lib/kubelet/pods/8f570c5a-dee2-40ae-b69d-607f7ce89c6f/volumes/kubernetes.io~csi/pvc-d63dfe55-693a-4763-9d1c-2d8a0503156b/mount
Output: mount: mount /var/lib/storageos/volumes/561715f0-3f43-64ff-9e7d-3d9fe69e48ff on /var/lib/kubelet/pods/8f570c5a-dee2-40ae-b69d-607f7ce89c6f/volumes/kubernetes.io~csi/pvc-d63dfe55-693a-4763-9d1c-2d8a0503156b/mount failed: Transport endpoint is not connected

I0902 19:59:12.499699   31894 mount_linux.go:331] Disk "/var/lib/storageos/volumes/561715f0-3f43-64ff-9e7d-3d9fe69e48ff" appears to be unformatted, attempting to format as type: "ext4" with options: [-F -m0 /var/lib/storageos/volumes/561715f0-3f43-64ff-9e7d-3d9fe69e48ff]
E0902 19:59:12.502843   31894 mount_linux.go:338] format of disk "/var/lib/storageos/volumes/561715f0-3f43-64ff-9e7d-3d9fe69e48ff" failed: type:("ext4") target:("/var/lib/kubelet/pods/8f570c5a-dee2-40ae-b69d-607f7ce89c6f/volumes/kubernetes.io~csi/pvc-d63dfe55-693a-4763-9d1c-2d8a0503156b/mount") options:(["defaults"])error:(exit status 1)

может был у кого-то опыт?
dumpe2fs <device> | grep -i superblock
источник

CO

Crash Override in Kubernetes — русскоговорящее сообщество
Попробуй  e2fsck -b <superblock из списка> <device>
источник

CO

Crash Override in Kubernetes — русскоговорящее сообщество
xfsprogs стоят?
источник

AV

Alexander Vaskin in Kubernetes — русскоговорящее сообщество
Crash Override
Попробуй  e2fsck -b <superblock из списка> <device>
ага, спасибо, на этих вольюмах, когда делаю e2fsck:
e2fsck: Attempt to read block from filesystem resulted in short read while trying to open 561715f0-3f43-64ff-9e7d-3d9fe69e48ff
Could this be a zero-length partition?
источник

Н

НерВ in Kubernetes — русскоговорящее сообщество
источник

GG

George Gaál in Kubernetes — русскоговорящее сообщество
Виктор
Ребят, кто ставил этот чарт? https://github.com/helm/charts/tree/master/stable/prometheus я правильно понимаю, nodeExporter метрики должно собирать в прометеусе черз serviceDiscovery без допилов? У меня почему-то метрик нет, а в serviceDiscovery только один под который сам пром
а чего оператор не возьмешь ? касательно SD - видимо чего-то не доделал
источник

GG

George Gaál in Kubernetes — русскоговорящее сообщество
И СНОВА ТРЕТЬЕ СЕНТЯБРЯ
источник

В

Виктор in Kubernetes — русскоговорящее сообщество
George Gaál
а чего оператор не возьмешь ? касательно SD - видимо чего-то не доделал
да, rbac не врубил, уже нашел
источник

В

Виктор in Kubernetes — русскоговорящее сообщество
George Gaál
а чего оператор не возьмешь ? касательно SD - видимо чего-то не доделал
а какие плюсы если в двух словах?
источник

GG

George Gaál in Kubernetes — русскоговорящее сообщество
если ты деплоишь много прометеусов - на каждую команду - (1)
(2) - настройка конфигов прометеуса через IaC, причем ресурсы могут быть опять же в репах конкретных команд и продуктов - вплоть до алертов
(3) в целом более гибкая настройка в рантайме без переустановки хельм чарта (здесь как бы и плюс, и минус - как посмотреть)
источник

GG

George Gaál in Kubernetes — русскоговорящее сообщество
если же у тебя один пром на кластер, тогда вероятно проще helm install prometheus и не ломать голову
источник

В

Виктор in Kubernetes — русскоговорящее сообщество
George Gaál
если ты деплоишь много прометеусов - на каждую команду - (1)
(2) - настройка конфигов прометеуса через IaC, причем ресурсы могут быть опять же в репах конкретных команд и продуктов - вплоть до алертов
(3) в целом более гибкая настройка в рантайме без переустановки хельм чарта (здесь как бы и плюс, и минус - как посмотреть)
понял, спасибо, по пункту 3 есть релоад конфига через сайдкар, костылек но вроде работает
источник

CO

Crash Override in Kubernetes — русскоговорящее сообщество
Переверну звезду и крест
источник

GG

George Gaál in Kubernetes — русскоговорящее сообщество
Виктор
понял, спасибо, по пункту 3 есть релоад конфига через сайдкар, костылек но вроде работает
Так он и в операторе будет ) просто оператором ты на ходу можешь количество реплик менять и все такое
источник

GG

George Gaál in Kubernetes — русскоговорящее сообщество
Без хельма )
источник

GG

George Gaál in Kubernetes — русскоговорящее сообщество
источник

GG

George Gaál in Kubernetes — русскоговорящее сообщество
Вместо metallb?
источник

k

kvaps in Kubernetes — русскоговорящее сообщество
Переслано от kvaps
Описал как я затащил qbec в argocd:
https://github.com/argoproj/argo-cd/issues/2930#issuecomment-686048925
источник

H

Hr АйТи Мониторинг... in Kubernetes — русскоговорящее сообщество
Доброе утро Есть ли DevOps Краснодар в группе? Прошу постучаться в личку😊
источник