AS
Ещё могут быть «круговые» категории: кликаешь в неё и попадаешь снова в парент категорию, а оттуда снова доступна та же категория)) и ссылка все время меняется, дефолтный дупфильтр не ловит
Size: a a a
2019 October 28
МС
Ещё могут быть «круговые» категории: кликаешь в неё и попадаешь снова в парент категорию, а оттуда снова доступна та же категория)) и ссылка все время меняется, дефолтный дупфильтр не ловит
мне тока поиск заюзать
МС
https://shop.nordstrom.com/ - я на этом наелся пагинации. Некоторые разделы не смог победить от слова вообе....
A
def get_html(url):
r = requests.get(url,
cookies={'lang': 'ru'})
return r.content
soup = BeautifulSoup(get_html("https://help.uber.com/partners/section/как-пользоваться-приложением?nodeId=64904bd6-66ca-47e9-965d-324413079f5c"),'html.parser')
r = requests.get(url,
cookies={'lang': 'ru'})
return r.content
soup = BeautifulSoup(get_html("https://help.uber.com/partners/section/как-пользоваться-приложением?nodeId=64904bd6-66ca-47e9-965d-324413079f5c"),'html.parser')
К
def get_html(url):
r = requests.get(url,
cookies={'lang': 'ru'})
return r.content
soup = BeautifulSoup(get_html("https://help.uber.com/partners/section/как-пользоваться-приложением?nodeId=64904bd6-66ca-47e9-965d-324413079f5c"),'html.parser')
r = requests.get(url,
cookies={'lang': 'ru'})
return r.content
soup = BeautifulSoup(get_html("https://help.uber.com/partners/section/как-пользоваться-приложением?nodeId=64904bd6-66ca-47e9-965d-324413079f5c"),'html.parser')
Вроде выглядит нормально, а в чем проблема?
B
stormwall кто нибудь сталкивался?
ru сайт?)
М
ru сайт?)
да... но хостинг где то в теплых странах
М
ru сайт?)
причем не так давно прокси помогали - а теперь все прокси напроч отрубает. походу какой то злой JS применили теперь
2019 October 30
EB
А вы в скрапингхабе используете сплешь чтобы не палить скрапинг? Или это у меня паранойя?