как бы вот

и меня беспокоит вопрос, как туда доставляются данные о товарах, Если во вкладке нетворк нет JSON-ов?

неужели server-rendered 😳

обычно на таких сайтах все рендерится сервом, а там где надо сделать xnr, то даже он возвращает не жсон, а html

я про битрикс

хотя я всего сайта 3 таких видел

сказать точно не могу

Вот сюда

Вообще к питону не относится, так что дальше сам

Спасибо всем ребята !

Почему не питон, он же через selenium?

Через селениум, но с xpath.

Селениум у него нормально отрабатывает, ошибка в выражении xpath

Пусть ищет группу по xpath'у)

может кто подсказать как поставить requests на мак? а то на работе выдали, хз что делать. в терминале прописал так:
pip install requests
Requirement already satisfied: requests in ./opt/anaconda3/lib/python3.8/site-packages (2.24.0)
Requirement already satisfied: certifi>=2017.4.17 in ./opt/anaconda3/lib/python3.8/site-packages (from requests) (2020.6.20)
Requirement already satisfied: chardet<4,>=3.0.2 in ./opt/anaconda3/lib/python3.8/site-packages (from requests) (3.0.4)
Requirement already satisfied: urllib3!=1.25.0,!=1.25.1,<1.26,>=1.21.1 in ./opt/anaconda3/lib/python3.8/site-packages (from requests) (1.25.9)
Requirement already satisfied: idna<3,>=2.5 in ./opt/anaconda3/lib/python3.8/site-packages (from requests) (2.10)

А когда запускаю скрипт:
Traceback (most recent call last):
 File "/Users/p.livatkin/Documents/Py_prj/curl.py", line 1, in <module>
   import requests
ModuleNotFoundError: No module named 'requests'

как это поправить? я в маках ничего не понимаю

pip3 install requests попробуй

Возможно не на ту версию питона устанавливаешь, либо неправильно работаешь в venv

во, шикарно. а я думал версию пипа надо указывать если у тебя и 2 и 3 питоны

заработало с pip3
меня немного смущает что при установке через pip что то пишет про анаконду

На маках по умолчанию(pip  или python) стоит второй питон. У тебя видимо сверху лежит конда, которая переписала pip...