Size: a a a

QA — Load & Performance

2020 November 21

NK

ID:0 in QA — Load & Performance
Переслано от Maksimall89
Всем привет, как и обещал краткий мануал-faq на что смотреть, когда пишешь свой отчёт мечты и анализируешь проблемы с производительностью
https://habr.com/ru/company/tinkoff/blog/514314/
источник

ВС

Вячеслав Смирнов... in QA — Load & Performance
Сохранил в копилку
источник

M

Maksimall89 in QA — Load & Performance
Спасибо за отзыв, Слава)
источник

NM

NoEndOutcry💡🔋🚓 Mikst... in QA — Load & Performance
Спасибо!
источник

ВС

Вячеслав Смирнов... in QA — Load & Performance
На @qaload_job за недавнее время появилось четыре вакансии на полную удаленку. Такого раньше не было
источник

ВС

Вячеслав Смирнов... in QA — Load & Performance
Вячеслав Смирнов
Планирую поучаствовать, как слушатель, на митапе "СБЕР QA Meetup: Путь на автоматизацию".
18 ноября, online. Среда

Где будет также материал по статистике:
18:30 - 19:05 (МСК). Статистические методы оценки качества
Антон Романов (Сбер)

Из чего состоит качество?
Можно ли оценить качество по дефектам?
Всегда ли рост числа дефектов в проде означает ухудшение качества?
Попробуем ответить на эти вопросы с помощью одного из семи инструментов управления качеством - контрольного графика.

https://techleadconf.ru/2020/sbermeetup-qa
(участие бесплатное)

Послушаю коллегу, как он применяет статистику для оценки качества.
Сейчас изучаю статистику, прежде всего чтобы понимать данные, а данных сейчас много и в нагрузке и в жизни
Посетил этот митап. И применил полученные знания по статистике в виде контрольного графика к метрикам по нагрузке. Полезное упражнение и два вечера заняло.

Анализ результатов тестов за полгода на графиках со скользящим средним дал понять, что тест вырос по используемым потокам JMeter с 2000 до 14000. Пора уже ещё один генератор нагрузки заказывать. Или тест переписывать.

Некоторые TPS выросли, некоторые упали.

Польза от доклада определенно есть
источник

ВС

Вячеслав Смирнов... in QA — Load & Performance
Если вы ведёте учёт достигнутых показателей максимальной производительности, в виде потоков, TPS, ступеней, ... То полезно занести данные в Excel и посмотреть на тренд
источник

ВС

Вячеслав Смирнов... in QA — Load & Performance
Тут причина роста количества потоков в том, что в сценарий постоянно добавляется новая функциональность. Появляются новые Thread Group, по ним устраняются узкие места в сервисах, нагрузка повышается, и повышается. Думаю, что теперь, когда количество активных потоков для подачи нагрузки больше 12 000 узкое место уже в самом инструменте, такое вполне возможно. Надо посмотреть на мониторинг самого JMeter, поработать над скриптом или просто добавить еще генераторов. Пока не было перед глазами такого графика - не думал об этом
источник

VG

Viktor Ganeles in QA — Load & Performance
А кто какой удобный способ знает для конвертации HAR в JMX ?
Про "откройте в Fiddler и проиграйте все записи кнопкой [R]eplay" - я в курсе. Это удобно только пока запросов мало.

у Fiddler есть плагин "MockingBird", но он каждый запрос в отдельную тредгруппу экспортит, что тоже портит всю малину :)
источник

VG

Viktor Ganeles in QA — Load & Performance
есть онлайн-конвертер от блейзметра, но у него есть минус - работает только онлайн.
источник

B

Bola in QA — Load & Performance
источник

VG

Viktor Ganeles in QA — Load & Performance
осталось скомпилить эту штуку
источник

VG

Viktor Ganeles in QA — Load & Performance
в принципе можно экспортить из жметра в cURL а потом жметром импортить.
источник

VG

Viktor Ganeles in QA — Load & Performance
Имена семплеров, после этого все одинаковые, но лучше чем ничего :)
источник

VG

Viktor Ganeles in QA — Load & Performance
видел где-то крутую тулу, которая выдавала JMX где имена семплеров брались из URL а в каждый запрос вкладывалось 2 отключённых семплера "Request" и "Response", в которых были соответствующие тела запросов  :)
источник

B

Bola in QA — Load & Performance
источник

B

Bola in QA — Load & Performance
На руби
источник

VG

Viktor Ganeles in QA — Load & Performance
рублю
источник

VG

Viktor Ganeles in QA — Load & Performance
не работал с ним ранее.
Нужен интерпретатор или компайлер?
что бы под виндой рубать :)
источник

ВС

Вячеслав Смирнов... in QA — Load & Performance
Viktor Ganeles
А кто какой удобный способ знает для конвертации HAR в JMX ?
Про "откройте в Fiddler и проиграйте все записи кнопкой [R]eplay" - я в курсе. Это удобно только пока запросов мало.

у Fiddler есть плагин "MockingBird", но он каждый запрос в отдельную тредгруппу экспортит, что тоже портит всю малину :)
https://github.com/lanitgithub/yah2j
Вот такой есть. От Алексея Светлова
источник