Size: a a a

Церковь метрик

2016 August 23

VS

Vladimir Smirnov in Церковь метрик
Но нужно тюнить
источник

D

Dima ☁️ in Церковь метрик
Vladimir Smirnov
У нас на виспер прилетает без учета репликации 2 млн уникальных точек В СЕКУНДУ. И примерно 20к метрики в секунду читается. Полет нормальный
ничоси :) где собирается 2M точек в секунду?
источник

PR

Paul Rudnitskiy in Церковь метрик
Dima ☁️
ничоси :) где собирается 2M точек в секунду?
мне больше интересно - как? Какое железо, какая СХД?
источник

K

Kirill in Церковь метрик
Aleksey Shirokikh
и на настроил один параметр
что за параметр надо настроить в ванильном графайт-стеке, чтобы винты не насиловать?
источник

AS

Aleksey Shirokikh in Церковь метрик
блин я не помню. спросите @demeliorator
источник

PK

Phil Kulin in Церковь метрик
Kirill
что за параметр надо настроить в ванильном графайт-стеке, чтобы винты не насиловать?
grep цифра 500
источник

K

Kirill in Церковь метрик
carbon.conf.example:MAX_UPDATES_PER_SECOND = 500
carbon.conf.example:MAX_DATAPOINTS_PER_MESSAGE = 500
источник

K

Kirill in Церковь метрик
да, первый похож) спс
источник

K

Kirill in Церковь метрик
И еще можно на файловой системе барьеры повырубать и все вот это вот
источник

VS

Vladimir Smirnov in Церковь метрик
Dima ☁️
ничоси :) где собирается 2M точек в секунду?
источник

VS

Vladimir Smirnov in Церковь метрик
Paul Rudnitskiy
мне больше интересно - как? Какое железо, какая СХД?
железо - блейды 2xE5-2620v3, 128GB Ram, 2x1.6TB SAS/SATA SSD в Raid0 (SAS - Toshiba, SATA - Intel S3510 если я не ошибаюсь). Таких боксиков порядка 50 + 4x дублирование для отказоустойчивости (2х в рамках ДЦ и столько же во второй ДЦ)
источник

PR

Paul Rudnitskiy in Церковь метрик
Vladimir Smirnov
железо - блейды 2xE5-2620v3, 128GB Ram, 2x1.6TB SAS/SATA SSD в Raid0 (SAS - Toshiba, SATA - Intel S3510 если я не ошибаюсь). Таких боксиков порядка 50 + 4x дублирование для отказоустойчивости (2х в рамках ДЦ и столько же во второй ДЦ)
то есть RAID0 SSD? мда
источник

VS

Vladimir Smirnov in Церковь метрик
Paul Rudnitskiy
то есть RAID0 SSD? мда
ну да, а что?
источник

VS

Vladimir Smirnov in Церковь метрик
Paul Rudnitskiy
то есть RAID0 SSD? мда
из интересной статистики, на этот объем данных сумарно (с учетом репликаций) выходит где-то 3 млн IOPS на запись
источник

VS

Vladimir Smirnov in Церковь метрик
собственно поэтому не какое-то СХД
источник

VS

Vladimir Smirnov in Церковь метрик
и там порядка 130ТБ метрик сумарно хранится.
источник

VS

Vladimir Smirnov in Церковь метрик
Paul Rudnitskiy
то есть RAID0 SSD? мда
есть товарищи, которые гоняют виспер на netapp'ах на обычных дисках по FC
источник

VS

Vladimir Smirnov in Церковь метрик
у нхи тоже вполне работает, не на таких объемах правда
источник

PR

Paul Rudnitskiy in Церковь метрик
Vladimir Smirnov
ну да, а что?
просто вы заливаете пожар керосином. С такими СХД быстро будет работать все. А если сделать ramdrive - то, может быть даже и быстрее. Помнится, Чистяков рассказывал про mail.ru, у которых был RAID0 из 16, если память не изменяет, SSD
источник

VS

Vladimir Smirnov in Церковь метрик
Paul Rudnitskiy
просто вы заливаете пожар керосином. С такими СХД быстро будет работать все. А если сделать ramdrive - то, может быть даже и быстрее. Помнится, Чистяков рассказывал про mail.ru, у которых был RAID0 из 16, если память не изменяет, SSD
у нас скорость дисков не проблема. Там рейд0 из двух дисков просто потому что нет преимуществ перед jbod'ом, а ставить 2x железа ради raid1 глупо
источник