Телеграмм чат группы kubernetes_ru страница 14212

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Kubernetes — русскоговорящее сообщество

5529 membersпожаловаться на группу

2020 October 20

PK

Pavel Kozlov in Kubernetes — русскоговорящее сообщество

у меня почему-то такие сервисы открывают порт на надо но на 127.0.0.1 т.е. снаружи они не доступны

Чтобы у тебя сервисы были доступны снаружи, тебе нужны либо NodePort, либо Loadbalancer сервисы, если промитиус внешний по отношению к куберу. Если же пром внутри кубера, то clusterIP подойдет

источник

18:27пожаловаться #1

TL

Timofey Larkin in Kubernetes — русскоговорящее сообщество

cybervagabond 🧝🏻‍♂️

Всем ку, кто может поделиться знанием:
При конфигурации promtail каким образом можно правильно рассчитать необходимый batchSize на стороне клиента promtail, что бы все работало корректно
как понял, в этот батч собираются логи и потом разом отправляются на loki
может есть для этого верная формула? по дефолту значение batchsize: 102400bytes = 100Ki

https://github.com/grafana/loki/pull/2710 тут нечто релевантное есть

Promtail: (and also fluent-bit) change the max batch size to 1MB by slim-bean · Pull Request #2710 · grafana/loki

This is a follow up to the change to increase batch size made in #2618 but to also apply it in the handful of other places we have the defaults specified. I tried to centralize this a little but mo...

источник

18:30пожаловаться #2

TL

Timofey Larkin in Kubernetes — русскоговорящее сообщество

А также NOTE this PR also changes the default batch size from 100kb to 1MB, it was discovered 100KB is too small for high volume log files which can generate log's at a rate of over 100kb/sec, meaning multiple batches per second were required and would cause Promtail to get behind. Increasing this to 1MB addresses this issue and does not affect slower streams which will still be sent based on the BatchWait setting of default 1s

https://github.com/grafana/loki/pull/2618

Promtail: Add a stream lagging metric by slim-bean · Pull Request #2618 · grafana/loki

This is similar to what we accomplish with promtail_file_bytes_total - promtail_read_bytes_total which gives a difference between the current file size and how far Promtail has read into it.
There ...

источник

18:31пожаловаться #3

c

cybervagabond 🧝🏻‍♂️... in Kubernetes — русскоговорящее сообщество

https://github.com/grafana/loki/pull/2710 тут нечто релевантное есть

Promtail: (and also fluent-bit) change the max batch size to 1MB by slim-bean · Pull Request #2710 · grafana/loki

This is a follow up to the change to increase batch size made in #2618 but to also apply it in the handful of other places we have the defaults specified. I tried to centralize this a little but mo...

Благодарю за информацию, Тимофей. (300Ki норм будет наверное), буду раскуривать

источник

18:34пожаловаться #4

TL

Timofey Larkin in Kubernetes — русскоговорящее сообщество

https://grafana.com/docs/loki/latest/clients/promtail/troubleshooting/ вот ещё, но конкретно про batch нет

Troubleshooting

Troubleshooting Promtail This document describes known failure modes of promtail on edge cases and the adopted trade-offs.
Dry running Promtail can be …

источник

18:34пожаловаться #5

TL

Timofey Larkin in Kubernetes — русскоговорящее сообщество

cybervagabond 🧝🏻‍♂️

Благодарю за информацию, Тимофей. (300Ki норм будет наверное), буду раскуривать

Я думаю, вам будет маловато.

источник

18:34пожаловаться #6

TL

Timofey Larkin in Kubernetes — русскоговорящее сообщество

Уточни, этот batch - с одного контейнера или со всего хоста?

источник

18:34пожаловаться #7

c

cybervagabond 🧝🏻‍♂️... in Kubernetes — русскоговорящее сообщество

batch для контейнера, если смотреть по логам, с 0.1 Mi - cpu в лимит сразу идет

server returned HTTP status 429 Too Many Requests (429): Ingestion rate limit exceeded (limit: 4194304 bytes/sec)

источник

18:35пожаловаться #8

TL

Timofey Larkin in Kubernetes — русскоговорящее сообщество

Если последнее, я б глянул мониторинг и, условно, если промтейл пишет от себя 5МБ/с то при batch_wait в 1s надо ставить batchsize в 5Mi

источник

18:35пожаловаться #9

TL

Timofey Larkin in Kubernetes — русскоговорящее сообщество

Тогда сложнее, но как видшиь, в свежем PR дефолт сделали 1Mi даже

источник

18:36пожаловаться #10

N

NB in Kubernetes — русскоговорящее сообщество

Чтобы у тебя сервисы были доступны снаружи, тебе нужны либо NodePort, либо Loadbalancer сервисы, если промитиус внешний по отношению к куберу. Если же пром внутри кубера, то clusterIP подойдет

внутренний, но не видит

источник

18:36пожаловаться #11

PK

Pavel Kozlov in Kubernetes — русскоговорящее сообщество

Подскажите, если сервис ClusterIP = None он должен быть как-то доступен из кластера внутри\снаружи?

подожди, а почему они у тебя ClusterIP=None? https://kubernetes.io/docs/concepts/services-networking/service/#headless-services

An abstract way to expose an application running on a set of Pods as a network service. With Kubernetes you don't need to modify your application to use an unfamiliar service discovery mechanism. Kubernetes gives Pods their own IP addresses and a single DNS name for a set of Pods, and can load-balance across them.
Motivation Kubernetes Pods are created and destroyed to match the state of your cluster. Pods are nonpermanent resources.

источник

18:38пожаловаться #12

N

NB in Kubernetes — русскоговорящее сообщество

подожди, а почему они у тебя ClusterIP=None? https://kubernetes.io/docs/concepts/services-networking/service/#headless-services

An abstract way to expose an application running on a set of Pods as a network service. With Kubernetes you don't need to modify your application to use an unfamiliar service discovery mechanism. Kubernetes gives Pods their own IP addresses and a single DNS name for a set of Pods, and can load-balance across them.
Motivation Kubernetes Pods are created and destroyed to match the state of your cluster. Pods are nonpermanent resources.

так созданы чартом промитиуса, хз

источник

18:38пожаловаться #13

TL

Timofey Larkin in Kubernetes — русскоговорящее сообщество

подожди, а почему они у тебя ClusterIP=None? https://kubernetes.io/docs/concepts/services-networking/service/#headless-services

An abstract way to expose an application running on a set of Pods as a network service. With Kubernetes you don't need to modify your application to use an unfamiliar service discovery mechanism. Kubernetes gives Pods their own IP addresses and a single DNS name for a set of Pods, and can load-balance across them.
Motivation Kubernetes Pods are created and destroyed to match the state of your cluster. Pods are nonpermanent resources.

Ну headless и headless, а что?

источник

18:38пожаловаться #14

TL

Timofey Larkin in Kubernetes — русскоговорящее сообщество

statefulset пойди, какой-нибудь

источник

18:39пожаловаться #15

N

NB in Kubernetes — русскоговорящее сообщество

https://github.com/prometheus-community/helm-charts/tree/main/charts/kube-prometheus-stack

prometheus-community/helm-charts

Prometheus community Helm charts. Contribute to prometheus-community/helm-charts development by creating an account on GitHub.

источник

18:39пожаловаться #16

N

NB in Kubernetes — русскоговорящее сообщество

вот этим пользуюсь

источник

18:39пожаловаться #17

PK

Pavel Kozlov in Kubernetes — русскоговорящее сообщество

так созданы чартом промитиуса, хз

причем туут промитиус? ты написал, что твои сервисы - headless

источник

18:39пожаловаться #18

PK

Pavel Kozlov in Kubernetes — русскоговорящее сообщество

You can use a headless Service to interface with other service discovery mechanisms, without being tied to Kubernetes' implementation.

For headless Services, a cluster IP is not allocated, kube-proxy does not handle these Services, and there is no load balancing or proxying done by the platform for them. How DNS is automatically configured depends on whether the Service has selectors defined:

источник

18:40пожаловаться #19

N

NB in Kubernetes — русскоговорящее сообщество

причем туут промитиус? ты написал, что твои сервисы - headless

сервисы экспортеров прометея как я понял

источник

18:40пожаловаться #20