на одном синке типа?

так он тогда будет его небось н раз у себя держать в памяти

и по нему итерироваться зазря

не смотрел внутрь

там в доке написано ещё:
One can also pass a dict mapping module names to minimum required level.

In such case, each log record will search for it’s closest parent in the dict and use the associated level as the filter. The dict values can be int severity, str level name or True and False to respectively authorize and discard all module logs unconditionally. In order to set a default level, the "" module name should be used as it is the parent of all modules (it does not suppress global level threshold, though).

О, вот это круто. Спасибо! :)

Да там пайтест только как драйвер, проверяет долгие пайплайны во внешней системе
Можно считать, что он делает docker run и ждёт когда контейнер что-то посчитает

недавно спрашивал про pytest снэпшоты... а вот есть ли плагин для doctest снэпшотов? Или может быть есть какие нибудь альтернативные доктесты?

1. Хочется чтобы раннер сам проставлял output если его нет
2. Хочется чтобы можрно было выбирать сабсет тестов (pytest -k)

Проставлял прям в досктринг в смысле?

угу... но не только, я еще доктесты в отдельных файлах пишу, как доку

Если только дописывать https://github.com/pytest-dev/pytest/blob/f54ec30a6d7969eba6a2003b4409d33828cd406d/src/_pytest/doctest.py, но выглядит как недешевое изменение

ну дописывать, сравнивать, обновлять когда нужно... вообщем обычный воркфлоу со снэпшотами

Вот тут пример кастомизации стандартного доктестовского пайтест-плагина: https://github.com/astropy/pytest-doctestplus/blob/master/pytest_doctestplus/plugin.py

Но в любом случае писать в нужное место в нужном файле нетривиальная задача сама по себе, я такого не видел особо

надеялся что то готовое есть 🙂 писать самому оч не хочется

ну не выглядит сильно сложно если честно... странно что не сделали

Было бы прикольно если бы оно на выходе просто в assert left == right тест превращалось, но у доктеста есть модификаторы и контекст, думаю в этом проблема

да... честно говоря pytest сложноват для меня... мне не очень нравятся решения с "неконтроллируемыми" плагинами...

pytest просто король неявности, это точно)

вот кстати альтернативный раннер (тоже есть плагин для pytest) и issue где обсуждают snapshots

https://github.com/Erotemic/xdoctest/issues/69