DD
пиши вопрос сюда
Size: a a a
2019 December 27
ОС
Если используя requests.text, я вытягиваю
<table id='top10last24h-table'>
<thead>
<tr>
<th>Top 10 / 24h</th>
</tr>
</thead>
<tbody>
</tbody>
</table>
Я же не смогу вытянуть элементы внутри tbody с помощью bs4, потому что их не вижу?
<table id='top10last24h-table'>
<thead>
<tr>
<th>Top 10 / 24h</th>
</tr>
</thead>
<tbody>
</tbody>
</table>
Я же не смогу вытянуть элементы внутри tbody с помощью bs4, потому что их не вижу?
ОС
МС
Есть у кого-то понятный мануал для чайника по scrapy? желательно на понятном языке))
если ты про русский - то есть пара статей на хабре, остальное - на вполне понятном буржязе (уж поверь человеку, который вообще не учил иняз)
нового - вряд ли что будет, одинм лениво, вторые не хотят мульки палить, третьи не видят смысла
нового - вряд ли что будет, одинм лениво, вторые не хотят мульки палить, третьи не видят смысла
M
если ты про русский - то есть пара статей на хабре, остальное - на вполне понятном буржязе (уж поверь человеку, который вообще не учил иняз)
нового - вряд ли что будет, одинм лениво, вторые не хотят мульки палить, третьи не видят смысла
нового - вряд ли что будет, одинм лениво, вторые не хотят мульки палить, третьи не видят смысла
Ок, понял спасибо, значит я не достаточно внимательно искал на Хабре.
МС
Ок, понял спасибо, значит я не достаточно внимательно искал на Хабре.
AR
Если используя requests.text, я вытягиваю
<table id='top10last24h-table'>
<thead>
<tr>
<th>Top 10 / 24h</th>
</tr>
</thead>
<tbody>
</tbody>
</table>
Я же не смогу вытянуть элементы внутри tbody с помощью bs4, потому что их не вижу?
<table id='top10last24h-table'>
<thead>
<tr>
<th>Top 10 / 24h</th>
</tr>
</thead>
<tbody>
</tbody>
</table>
Я же не смогу вытянуть элементы внутри tbody с помощью bs4, потому что их не вижу?
да, оно аяксом грузится
SS
Коллеги, есть те, кто запускал Scrapy спайдеры как таски Celery?
Никак не могу победить асинхронный запуск из Джанги.
Никак не могу победить асинхронный запуск из Джанги.
МС
Коллеги, есть те, кто запускал Scrapy спайдеры как таски Celery?
Никак не могу победить асинхронный запуск из Джанги.
Никак не могу победить асинхронный запуск из Джанги.
может и лодку мне, но https://stackoverflow.com/questions/11528739/running-scrapy-spiders-in-a-celery-task не похоже на правду?
сам не пробовал, просто помню что нарывался на пару Scrapy & Celery....
сам не пробовал, просто помню что нарывался на пару Scrapy & Celery....
К
может и лодку мне, но https://stackoverflow.com/questions/11528739/running-scrapy-spiders-in-a-celery-task не похоже на правду?
сам не пробовал, просто помню что нарывался на пару Scrapy & Celery....
сам не пробовал, просто помню что нарывался на пару Scrapy & Celery....
Так себе подход там
МС
Так себе подход там
ну, уж что есть 😂, я и сказал что "сам не пробовал"
К
ну, уж что есть 😂, я и сказал что "сам не пробовал"
Я понял, это не наезд, просто рассуждаю
МС
кстати, а вот глупый вопрос
https://docs.scrapy.org/en/latest/topics/practices.html
тут все примеры "ждем пока не выполнится ....", а как сделать "запустить и хрен с ним, как нить отпработает"? :)
https://docs.scrapy.org/en/latest/topics/practices.html
тут все примеры "ждем пока не выполнится ....", а как сделать "запустить и хрен с ним, как нить отпработает"? :)
МС
Или очевидный scrapyd, но мы не ищем легких путей
нууу, это же слишком легко 😂