Y
глянть что браузер шлет в этом поле
Content-Type: application/json; charset=utf-8
Size: a a a
2020 January 15
МС
Yurii
Content-Type: application/json; charset=utf-8
ага, а ты шлешь это?
Y
ага, а ты шлешь это?
Ничего🧐Почему-то с этим не получилось. Еще сейчас попробую.
S
понял спасибо ребят
Y
headers={'Content-Type': 'application/json; charset=utf-8'} добавил
INFO: Ignoring response <502
INFO: Ignoring response <502
Y
и вообще, чего гадать - сделай реально save as curl и скорми в curl to python
Там еще такое есть 'X-Requested-With': 'XMLHttpRequest',
И ссылку на json мне запрос не дает
Самое интересное что requests парсит json норм
r = requests.post('url', json=data)
И ссылку на json мне запрос не дает
Самое интересное что requests парсит json норм
r = requests.post('url', json=data)
Y
Мб сайт просто такой, ну ладно есть варианты requests юзать или xml парсить, но он не хочет просто так парсить response.xpath, надо немного поизвращаться
МС
дай сайт, можно в личку, аж интеерсно стало
i
дай сайт, можно в личку, аж интеерсно стало
потом расскажешь, чо за фигня была)
МС
кароче
МС
FormRequest - с json что то не задружился, не докопался почему, спать охота, работают:
yield scrapy.Request(url='https://www.', method='POST', body=data, callback=self.parse_req, headers=headers)
тут в data строка полученная через json.dump
yield scrapy.http.JsonRequest(url='https://www.', data=data_json, callback=self.parse_form_data, headers=headers)
тут уже data_json словарик
yield scrapy.Request(url='https://www.', method='POST', body=data, callback=self.parse_req, headers=headers)
тут в data строка полученная через json.dump
yield scrapy.http.JsonRequest(url='https://www.', data=data_json, callback=self.parse_form_data, headers=headers)
тут уже data_json словарик
АП
FormRequest - с json что то не задружился, не докопался почему, спать охота, работают:
yield scrapy.Request(url='https://www.', method='POST', body=data, callback=self.parse_req, headers=headers)
тут в data строка полученная через json.dump
yield scrapy.http.JsonRequest(url='https://www.', data=data_json, callback=self.parse_form_data, headers=headers)
тут уже data_json словарик
yield scrapy.Request(url='https://www.', method='POST', body=data, callback=self.parse_req, headers=headers)
тут в data строка полученная через json.dump
yield scrapy.http.JsonRequest(url='https://www.', data=data_json, callback=self.parse_form_data, headers=headers)
тут уже data_json словарик
Было такое у меня, да.
АП
Тоже лень разбираться было.
МС
а там и разбираться не чего, formdata должна быть формата name1=val1&name2=val2
2020 January 16
B
Payload - Json.dumps, Form data - urlencoded