VG
в JSON запаковал, сохранил по ключу и достал
Size: a a a
2021 March 02
VG
Да тут даже не дорого = деньги на оборудование
VG
А больше - дорого = долго и напряжно по CPU
SG
в JSON запаковал, сохранил по ключу и достал
А если положить сразу готовый файлик csv, который не нужно перепарсивать и без 1ой джобы?
VG
При этом еще сервис сам будет использовать batch для распределения парсинга
K
Ну тут попросили проект посмотреть один подобный, тоже без гита типа. Но на самом сервере обнаружил папочку .git. Посмотрел - репозитории уже давно удалены, ссылки на них 404 выдают. Ну я скачал папку .git и вуаля.
А если бы не было - что мешает сделать на проекте git init и уже пушнуть в свою репу?
А если бы не было - что мешает сделать на проекте git init и уже пушнуть в свою репу?
так обычно и бывает. выкачаю - запущу, все ок, кидаю в новый репозиторий и поехали по ТЗ...
SG
так обычно и бывает. выкачаю - запущу, все ок, кидаю в новый репозиторий и поехали по ТЗ...
Просто можно с сервера сразу отправить раз такие заказчики
S
А как тогда, первая задача распарсит CSV и сгрузит все в кеш, в тот же редис например.
Вторая задача уже подтянет данные с кеша, обработает их по бизнесс правилам, сохранит и почистит за собой 🙂
Вторая задача уже подтянет данные с кеша, обработает их по бизнесс правилам, сохранит и почистит за собой 🙂
А если между этими джобами сервер перестартует и данные пропадут? Ты же не можешь перезагружать сервер только в окна между операциями
А если кэш будет использоваться другими проектами и твои данные просто вытеснятся?
А если кэш будет использоваться другими проектами и твои данные просто вытеснятся?
ВШ
проекта, первую выкачала с теста, она походу упорота
Ну чисто теоретически такое возможно. Вопрос только как это работает на проде?
MB
Комрады, еще один вопросик.
Возможно, это js делает, а может и нет. Во всяком случае в js я не обнаружил ничего такого. Остается грешить на ларку.
Короче, всем формам на сайте подставляется novalidate. В шаблонах этого нет. Значит подставляется когда страница собирается. Но где это в ларке искать я хз.
Может кто сталкивался с таким?
Возможно, это js делает, а может и нет. Во всяком случае в js я не обнаружил ничего такого. Остается грешить на ларку.
Короче, всем формам на сайте подставляется novalidate. В шаблонах этого нет. Значит подставляется когда страница собирается. Но где это в ларке искать я хз.
Может кто сталкивался с таким?
VG
А если положить сразу готовый файлик csv, который не нужно перепарсивать и без 1ой джобы?
Для меня идеально было бы вообще держать это все в memcache.
Бью файл по 10к строк - парсю, отдаю на обработку бизнесс задаче.
Весь лайфтайм в памяти.
Бью файл по 10к строк - парсю, отдаю на обработку бизнесс задаче.
Весь лайфтайм в памяти.
VG
А если между этими джобами сервер перестартует и данные пропадут? Ты же не можешь перезагружать сервер только в окна между операциями
А если кэш будет использоваться другими проектами и твои данные просто вытеснятся?
А если кэш будет использоваться другими проектами и твои данные просто вытеснятся?
Не не не, кеш другими проектами - я себе руки отрублю
SG
Для меня идеально было бы вообще держать это все в memcache.
Бью файл по 10к строк - парсю, отдаю на обработку бизнесс задаче.
Весь лайфтайм в памяти.
Бью файл по 10к строк - парсю, отдаю на обработку бизнесс задаче.
Весь лайфтайм в памяти.
1 жоба парсит весь файл и разносит по джобам?
АП
Ребят. Ну помогите пожалуйста с очередями. У меня есть рассылка уведомлений по почте о новой акции, на это создаётся job. На сервере я запускаю команду со скрина. Job создаётся, делать 3 попытки как у него и прописано, а потом просто исчезает, не падает в failed_jobs, а пропадает, при это выполнения тоже нет. Я полдня мучаюсь, не знаю куда смотреть надо даже. Хотя на локалке вроде как работает.
Ну помогите пожалуйста.
SG
Для меня идеально было бы вообще держать это все в memcache.
Бью файл по 10к строк - парсю, отдаю на обработку бизнесс задаче.
Весь лайфтайм в памяти.
Бью файл по 10к строк - парсю, отдаю на обработку бизнесс задаче.
Весь лайфтайм в памяти.
Точнее - делит файл на джобы, которые парсят файл?
VG
Точнее - делит файл на джобы, которые парсят файл?
Да, с помощью batch групирует эти джобы
VG
В каждом batch еще и chain
VG
Типо
спарсили - сохранилиVG
Комрады, еще один вопросик.
Возможно, это js делает, а может и нет. Во всяком случае в js я не обнаружил ничего такого. Остается грешить на ларку.
Короче, всем формам на сайте подставляется novalidate. В шаблонах этого нет. Значит подставляется когда страница собирается. Но где это в ларке искать я хз.
Может кто сталкивался с таким?
Возможно, это js делает, а может и нет. Во всяком случае в js я не обнаружил ничего такого. Остается грешить на ларку.
Короче, всем формам на сайте подставляется novalidate. В шаблонах этого нет. Значит подставляется когда страница собирается. Но где это в ларке искать я хз.
Может кто сталкивался с таким?
Используешь чистый blade или какой-то форм-генератор?
SG
Ну помогите пожалуйста.
Добавь в жобах чтобы писали в логи, поймешь где и что обрывается