Size: a a a

2020 August 19

B

Bola in JS for testing
Alex Grigurko
Сегодня поймал один, при определенных шагах сервер отвечал 500, руками воспроизвести не смог, но автоматическим прогон иногда ловлю, после зашёл в логи и нашел какой сервис тупит
так это мониторится, что на бою, что в тестовой среде - не через e2e
источник

B

Bola in JS for testing
тем более, временами заглядываешь в логи и смотришь - а чего это тест xxx рестартанул
источник

AG

Alex Grigurko in JS for testing
Boris Osipov
можно. и если при этом плевать на UХ и что?
не понял вопроса
источник

AG

Alex Grigurko in JS for testing
Bola
тем более, временами заглядываешь в логи и смотришь - а чего это тест xxx рестартанул
в чем преймущество вечно зеленых тестов?
источник

AG

Alex Grigurko in JS for testing
чувствую я встрял на холивар😁
источник

BO

Boris Osipov in JS for testing
Alex Grigurko
в чем преймущество вечно зеленых тестов?
а в чем преимущество мигающих тестов? :)
источник

BO

Boris Osipov in JS for testing
Alex Grigurko
чувствую я встрял на холивар😁
дада :D
источник

AG

Alex Grigurko in JS for testing
Boris Osipov
а в чем преимущество мигающих тестов? :)
они сигнализируют о проблеме
источник

B

Bola in JS for testing
Alex Grigurko
чувствую я встрял на холивар😁
хотел написать ответ - но да, это холивар
ОДНАКО, раз в кипарис привезли ретраи и это отдельно анонсировали, это что-то да значит
источник

AG

Alex Grigurko in JS for testing
либо автоматизатор бакопор и нужно исправлять тест
источник

AG

Alex Grigurko in JS for testing
либо что-то с продуктом не то
источник

VS

Vitalii Sotnichenko in JS for testing
бизнесу надо зеленый отчет, а тот плавающий дефект с большой вероятностью для бизнеса дешевле не чинить, это уже тема рисков. Но для бизнеса часто важнее новые фичи или минорные возможно не работающие тесты на которые надо время тратить
источник

AG

Alex Grigurko in JS for testing
Bola
хотел написать ответ - но да, это холивар
ОДНАКО, раз в кипарис привезли ретраи и это отдельно анонсировали, это что-то да значит
согласен, есть разные подходы и скорей всего это где-то имеет место быть
источник

BO

Boris Osipov in JS for testing
Alex Grigurko
они сигнализируют о проблеме
справедливо. другой вопрос можешь ли ты решить эту проблему :) бывают кейсы что нет и тут твой подход не совсем хорош, согласен?
источник

BO

Boris Osipov in JS for testing
на этом можно закрыть тему :)
источник

B

Bola in JS for testing
Alex Grigurko
либо что-то с продуктом не то
вообще-то с технологией в целом что-то не то )
интернет не гарантирует тебе 100% доступности приложения
слишком много промежуточных слоев
источник

AG

Alex Grigurko in JS for testing
Boris Osipov
справедливо. другой вопрос можешь ли ты решить эту проблему :) бывают кейсы что нет и тут твой подход не совсем хорош, согласен?
поддерживаю)
сколько продуктов - столько и проблем - столько и их решений, идеальных нет)
источник

B

Bola in JS for testing
а когда у тебя и тестовые среды развернуты не на твоем железе, а где-то в арендуемых облаках, то может произойти все что угодно
ретраи - как способ ), хотя бы разок да рестартануть, чтобы не беспокоиться в лишний раз
источник

AG

Alex Grigurko in JS for testing
Bola
а когда у тебя и тестовые среды развернуты не на твоем железе, а где-то в арендуемых облаках, то может произойти все что угодно
ретраи - как способ ), хотя бы разок да рестартануть, чтобы не беспокоиться в лишний раз
сегодня как раз с ПМ дискусировали на тему флаки тестов, он говорит нужно добиться 100%  зеленых тестов, падать должны только если есть дефект
источник

AG

Alex Grigurko in JS for testing
можно ретрай
источник