iz
Если sql написан правильно то да.
ну алхимия вроде генерит нормальные запросы
Size: a a a
2020 January 17
АП
Ну да.
МС
Вопрос производительности
АП
Вопрос производительности
Померяй)
МС
Да ну, зануды вы 😒
Нет что бы сказать...
Нет что бы сказать...
ЕJ
Так возник вопрос: насколько обоснованно использовать db фреймворк для скрапи? При условии, что двиг базы жёстко прописан и меняться никогда не будет.
Я всегда считал, что нативный SQL всегда шустрее любого фреймворка...
Я всегда считал, что нативный SQL всегда шустрее любого фреймворка...
что за сайт/задача что критична производительность?
МС
что за сайт/задача что критична производительность?
50+ млн записей в базе. Скорость добавления достаточно важна.
Сайт не скажу, ибо не мое 🙂. Да и при чем тут сам сайт? Вопрос работы пайпа при прочих равных условиях
Сайт не скажу, ибо не мое 🙂. Да и при чем тут сам сайт? Вопрос работы пайпа при прочих равных условиях
✏d
Да ну, зануды вы 😒
Нет что бы сказать...
Нет что бы сказать...
пиши руками!!!!
Запросы скл в стрингах с тройной ковычкой!
ТОВАРИЩ!
Не занимайся алхимией!
Это вредит построению коммунизма!
Запросы скл в стрингах с тройной ковычкой!
ТОВАРИЩ!
Не занимайся алхимией!
Это вредит построению коммунизма!
ЕJ
50+ млн записей в базе. Скорость добавления достаточно важна.
Сайт не скажу, ибо не мое 🙂. Да и при чем тут сам сайт? Вопрос работы пайпа при прочих равных условиях
Сайт не скажу, ибо не мое 🙂. Да и при чем тут сам сайт? Вопрос работы пайпа при прочих равных условиях
* мне больше просто интересно - что парсять моштабного, зачем нужно
МС
* мне больше просто интересно - что парсять моштабного, зачем нужно
Ну, мой проект есть - парсинг инсты.
Там те же объемы будут.
Из крупно-популярного : объявы, социалки...
Там те же объемы будут.
Из крупно-популярного : объявы, социалки...
АП
50+ млн записей в базе. Скорость добавления достаточно важна.
Сайт не скажу, ибо не мое 🙂. Да и при чем тут сам сайт? Вопрос работы пайпа при прочих равных условиях
Сайт не скажу, ибо не мое 🙂. Да и при чем тут сам сайт? Вопрос работы пайпа при прочих равных условиях
При равных условиях без алхимии будет быстрее.
МС
пиши руками!!!!
Запросы скл в стрингах с тройной ковычкой!
ТОВАРИЩ!
Не занимайся алхимией!
Это вредит построению коммунизма!
Запросы скл в стрингах с тройной ковычкой!
ТОВАРИЩ!
Не занимайся алхимией!
Это вредит построению коммунизма!
Спасиб, товарисчь, твоей коммент очень важен и информативен для меня
МС
При равных условиях без алхимии будет быстрее.
Угу, спс. Теперь бум думать как от него избавиться 😂
АП
Угу, спс. Теперь бум думать как от него избавиться 😂
Включи эхо, в логе посмотри запросы которые она генерирует и перениси их.
МС
Да не, тут вопрос просто переписать и не поломать😁. Ничего сложного, просто аккуратненько надо.