Все остальное терпимо, с CI интегрируется в целом норм.
А, вспомнил. Еще проблема держать несколько версий.
Например, у тебя есть master и develop, и вот в постмене тебе придется тупоподдерживать х2 коллекций.
А по-человечески - сделал бы писал бы новые тесты в develop, а старые из master были бы актуальны.