понимаю, могу ли я как то ползапросом заселетить этот констраинт уникальный в данном случае
cubemap.idА, по-моему, не понимаете. Зачем Вам его "селетить", если Вы его и так знаете (по крайней мере, должны)?
По какому ограничению там CONFLICT? Вот его поле (или набор полей и т.п.) и указывайте в ON CONFLICT.