вы как-то руками настраивали чтоли exchange? чтобы по разным роутинг кеям расходилась по разным очередям и потом уже воркеры читали эти разные очереди?
exchange работает по дефолту так, она принимает сообщение с роутинг ключом, а потом раскидывает его по подключенным очередям в зависимости от того какая очередь какой ключ слушает