либо вы опять путаете данные и их представление

туда же любители читать жсон текстовым редактором

с контейнерами надо работать как с контейнерами, а не как с потоком байтов

ну тут хотя бы сайт дали, а не пастебин

а можно пример поподробней, а то не очень понятно. И особенно связь с item, имеется в виду не scrapy-евский item, а тег что-ли в html?

и что такое <p.*?> - это регулярка что-ли или чего?

Например мне нужно собрать характеристики товара:

item['Характеристики'] = response.xpath('//table[@class="table ware-table"]//tr').getall()
item['Характеристики'] = '\n'.join(item['Характеристики'])

И мне нужно чтобы они выглядели вот так в итоге в CSV
Характеристики|Бренд|Creo Ceramique
Характеристики|Код|00057546
Характеристики|Высота, см|84,5

Т.е. В данном случае я бы хотел сделать замены:
^ на Характеристики|
</td>.*?<td.*?> на |

Я вижу только вариант c re.sub

я б циклом сделал и не парился

Как насчет просто взять селекторами значения td?

зачем что-то заменять

Можно ) Да хз, просто так привык в работе с программой парсером. А в программировании всё по другому ) Вот переучиваюсь )

Спасибо.

Ты по-сути делаешь работу за парсеры и селекторы.
1. рекомендую всегда использовать css-селекторы, если уже с ними не получается, тогда xpath
2. посмотри еще на либу html_text
3. ну и да, ты как-то сильно уровень выше взял, и зачем-то его еще сразу присвоил в item['Характеристики'] вместо того, чтобы их нормально взять циклом, из-за этого куча геморроя со всякими '\n'.join  и заменами с регулярками.

Ну например:
scrapy shell https://santehcentr.com/catalog/sanfayans-toulon/detail/toulon-rakovina-s-pedestalom-600-480-845/
[[x.css('td::text')[0].get(), html_text.extract_text(x.css('td')[1].get())] for x in response.css('.table.ware-table>tbody>tr')]

и ты уже получишь https://i.imgur.com/aUAlJg3.png

Это немного проясняет ) Спасибо большое!)

(хотя лично я не люблю оперировать по индексам, т.к. редко таблицы бывают реально "прямоугольные", часто там сбоку еще какие-нибудь поля, в одном месте по 5 характеристик, в другом по 10, а сбоку еще блямба торчит)

Здравствуйте, мне посоветовали задать вопрос в этой группе

Вопрос по селениуму:
Как можно использовать https прокси с аутентификацией? (хром)