Немного затронули тему

Всем привет

А кто-нибудь делал мирроринг из облачного гитлаба в серверный по pull политике?

Привет, конкретный вопрос какой ?

Да на самом деле уже нет) Спасибо. Я в формате url очевидную ошибку допустил и заметил только сейчас.

Привет всем. Может кто подскажет

Делаю 2 запроса. Один через браузер в инкогнито хрома: https : //market.yandex.ru/catalog--smartfony/16814639/list?hid=91491&glfilter=16816262:16816264&onstock=1

Другой -- курлом.

    curl --location --request GET 'https://market.yandex.ru/catalog--smartfony/16814639/list?hid=91491&glfilter=16816262:16816264&onstock=1' --header 'Accept:  text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9' --header 'Accept-Encoding:  gzip, deflate, br' --header 'Accept-Language:  ru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7' --header 'Connection:  keep-alive' --header 'Host:  market.yandex.ru' --header 'Sec-Fetch-Dest:  document' --header 'Sec-Fetch-Mode:  navigate' --header 'Sec-Fetch-Site:  none' --header 'Upgrade-Insecure-Requests:  1' --header 'User-Agent:  Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.61 Safari/537.36'

В первом случае ответ 302. Во втором 403. Хедеры и всё остальное совпадает. В чём прикол?

В браузере наверняка кука какая-нибудь стоит, а в курловом запросе у тебя её нет

Это чтобы поржать, или чего такое?

Это ответ на проблему, которую я обозначал

Да нет там ответа. Код ответа определяется сервером, а не клиентом.

Забейте (=

Можете удалить мой ответ или попросить админа, если считаете его здесь лишним

Дело в cipher-ах видимо.

curl https://market.yandex.ru  -o /dev/null --ciphers TLS_ECDHE_RSA_WITH_AES_128_GCM_SHA256 -v

Просто дичь, если правда 🤷‍♂🤦‍♂

?

Ну, очередные грабли, разложенные ровным слоем на пути людей, идущих в сисопс и девопс

зато никто в ответе не отписался :)
будем надеяться, @solresl отпишет итог своих изысканий )

Больше похоже на заботливо разложенные маркетом грабли против жаждущих попарсить

особенно если почитать чуть больше в ответе, чем код ответа

<div class='header__code'>403</div></div><div class='content'>
   <h1 class="content__h1">Доступ к&nbsp;нашему сервису временно запрещён!</h1><p>Возможно, ваш компьютер заражён вредоносной программой, которая автоматически обращается к&nbsp;Яндексу.<br>Рекомендуем вам проверить компьютер на&nbsp;вирусы или обратиться к&nbsp;администратору вашей сети.</p><p>Если у&nbsp;вас возникли проблемы или вы&nbsp;хотите задать вопрос нашей службе поддержки, пожалуйста, воспользуйтесь <a class="link" href="https://yandex.ru/support/captcha/" onclick="ym(15897442, 'reachGoal', 'support_complain', { 'req_id': '1594933752087920-10063430724494039758' }); return true;">формой обратной связи</a>.</p>