Проблема была в том, что в simple data writer относительные пути работают через jmeter.save.saveservice.base_prefix (по дефолту ~/) и либо в разных местах нужно было использовать разные относительные пути (потому что много где можно указать только через стандартный лиуксовый вариант ./, либо поменять workdir