S
Или он один скрипт не запустит пока предыдущий запуск не завершилс
На нормальных серваках могут работать параллельно
Size: a a a
2020 September 17
S
Можно разрулить один крон и несколько потоков SH скрипт, который будет в фоне выполнять php скрипт
S
+ передать туда какие-нибудь метки разбивки
S
И следовательно по ним одним скриптом гонять большой файл
AS
Ну если у меня будет эти 2 млн адресов в базе и статус 0/1, то запуская каждую секунду новый крон, по идее они все параллельно и будут пахать, пока все не вспашут
P
так я предлагал же в базе сделать очередь ((:
DM
В чем трудности?
в понимании того, что ты написал)
S
Ну если у меня будет эти 2 млн адресов в базе и статус 0/1, то запуская каждую секунду новый крон, по идее они все параллельно и будут пахать, пока все не вспашут
Будут потери на запросах в базу
AS
Ну в базу оно первым этапом и летит
S
Ну и тогда я бы ещё пару статусов ввёл, типа в процесе обработки
P
это фигня по сравнению с потерями на загрузке
AS
Будут потери на запросах в базу
Ну мне кажется эти потери компенсируются массовостью кронов )
ЕА
они алиэкспрес спарсили что ли)
S
И опять же если база MyIsam то будет блочить всю таблицу
С
в понимании того, что ты написал)
AS
Короче идея неплохая, можно попробовать
S
И следовательно ожидая ответа может случится колапс
S
И они начнут работать в 1-2 потока
P
ну просто подобрать интервал в кроне
AS
Не ну я думаю лагов, которые создаются при скачивании картинок хватит на запись в базу больше, чем на 2 потока. В общем, это перспективное направление)