в ошибке всё написано

Я если честно недели 2 как начал юзать скрапи и могу ошибаться но аналогичный код паука на других простых , менее навороченных  CMS работает

насколько долго ты питон изучаешь?

Вообще можно сказать не изучал серьёзно , только по видео и статьям с интернета

ну вот, перед скрапи желательно язык немного знать

аналогичный, но не такой же

Спасибо большое , обязательно займусь

Что нужно изменить в пайплайне,  чтобы скачивались файлы по таким ссылкам?
https://www.glava.no/produkter/betong-og-anlegg/glava-vintermatte/_/attachment/download/89be7043-c010-4365-9901-79e103000894:5cfa9d72c2bc88c816ba9e6ad17c3bb95713f30c/sikkerhetsdatablad-glava-glassull.pdf

Такие ссылки обрабатываются нормально
https://app.ecoonline.com/app/api/document/v1/sds/15839447/pdf?accesskey=bBU/7GTdmlwR8MeUHEYXdk3XvavpJVccEAdiztV/l/OO6wLAL4OZ2qktuPLOU9rF&applicationID=&int_status=0

Пайплайн:
https://pastebin.com/hB9iN5JX

а в чём проблема?

по первой ссылке:
Content-Disposition: attachment; filename="sikkerhetsdatablad-glava-glassull.pdf"; filename*=UTF-8''sikkerhetsdatablad-glava-glassull.pdf

по второй
Content-Disposition: inline; filename="Weber.mix M10.pdf"

может оно не может такой заголовок обработать 🙄
хотя, это все высасывание из пальца. Надо сразу писать что пробовал, что говорит, какое поведение. А то оно все напоминает смотрение в хрустальный шар...

а, я ожидал что Content-Disposition: attachment будет по второй

а скрапи это, вроде как, не проверяет.
он, на первый взгляд, только выкусывает из заголовка  Content-Disposition именно имя файла и все. Причем, по логике, должно в любом случае работать....

юзер-боты и обычные боты

скрапи не нужен

опять делаешь ставки, а потом смотришь можешь ли сделать работу?

ну так ставку ты уже сделал?

Гайз, на сайте есть api SOAP и REST сервис. Чем лучше парсить? Bs4 или scrapy?

есть же апи, что ты там решил распарсивать bs-ом?

знаем как ты знаешь, ты и аиограм знаешь)

нужно быть по культурнее с людьми к которым обращался за помощью