Size: a a a

QA — Load & Performance

2021 July 12

VG

Viktor Ganeles in QA — Load & Performance
Ну, это было не оффтопик
источник

R

Rslr in QA — Load & Performance
Как проверить, что в графане верно выводит данные?
источник

VG

Viktor Ganeles in QA — Load & Performance
Сравни с jmeter report
источник

VG

Viktor Ganeles in QA — Load & Performance
Или пульни 10 операций с известным тебе временем ответа (например, через dummy sampler) и проверь
источник

VG

Viktor Ganeles in QA — Load & Performance
Учти, бэкенд листнер агрегирует данные по 5 сек или 5000 событий
источник

R

Rslr in QA — Load & Performance
Они должны быть одинаковыми? Они отличаются
условно в графане 1,4 тпс, в жметре 1,28
С дамми семплер интересный пример, нужно проверить
источник

VG

Viktor Ganeles in QA — Load & Performance
А ты их прогони за 5 сек
источник

VG

Viktor Ganeles in QA — Load & Performance
В пределах
источник

VG

Viktor Ganeles in QA — Load & Performance
Тогда в графане появится одна точка
И она должна совпасть с итоговыми данными в jmeter aggregate report
источник

ВС

Вячеслав Смирнов... in QA — Load & Performance
Нужно задать равные интервалы группировки.
Но все равно значения будут отличаться. Все, кроме среднего времени выполнения. Максимума и минимума.
Средней TPS, максимальной и минимальной.
...

Также учитывайте фильтры по статусу, statut (да опечатка есть в имени поля)
TPS по all, ok, ko - разные. Среденяя TPS по всем этим статусам не равна TPS по статусу all.
источник

ВС

Вячеслав Смирнов... in QA — Load & Performance
Метрики 90pct в HTML Report и в Grafana могут совпадать, только если лить сырые данные в InfluxDB.
В остальных случаях метрики не совпадут.
источник

ВС

Вячеслав Смирнов... in QA — Load & Performance
Обсуждение кастомного инструмента - здорово!

Обсуждения вакансий, зарплат, условий труда субъективны. Поэтому затягиваются и приводят к спорам. В чате будет 1000 непрочитанных сообщений. Вопросы останутся без ответов. А наша цель - помогать, давать ответы, зававать вопросы
источник

SK

Sergey Khoroshavin in QA — Load & Performance
Вопрос по существу ) насколько удобное/адекватное решение К6? Если при этом:
- надо тестить кастомные протоколы (для jmeterа писали свои семплеры, но это просто боль и страдание)
- надо пихнуть тесты в пайплайн и принимать решение pass/fail по вещам типа достигнутого throughtput, p95 latency в середине теста и прочим подобным вещам (кстати, если оставаться на jmetere - то нужен будет кастомный листенер, или стандартными можно обойтись?)
- не хочется пользоваться платным клауд-сервером от К6
источник

jj

jagga jagga in QA — Load & Performance
- с кастомными прото будет все не очень хорошо
- в пайплайн зайдет замечательно
- платный клауд вам понадобится в случае очень высоких нагрузок
источник

jj

jagga jagga in QA — Load & Performance
по второму пункту для джметра - надо или внешний оркестратор или смотреть на плагин джеметра с такой функциональностью (она довольно куцая) или писать самим
источник

jj

jagga jagga in QA — Load & Performance
внешний оркестратор - я.танк или таурус
источник

КО

Кристина Олейникова... in QA — Load & Performance
Всем привет
Ребята, подскажите пожалуйста , как в jmeter настроить сценарий, чтобы удалялся не каждый 2 пользователь, а каждый 10?
Отдали тест план в работу, а опыта мало в написании и понимании как работает прога
источник

VG

Viktor Ganeles in QA — Load & Performance
А протоколы совсем кастомные?
Какие?
источник

VG

Viktor Ganeles in QA — Load & Performance
А как сейчас сделано, чтобы удалялся каждый второй?
источник

КО

Кристина Олейникова... in QA — Load & Performance
Да
источник