Size: a a a

2020 October 23

AC

Artur Chobanyan in symfony
Dmitry
вот, все. вы не прошли собеседование
Ну в такое место и не хочу, вместо свой работы делать чужую
источник

AK

Alexander Kaluzhsky in symfony
Dmitry
а вот как решить проблему
413 entity is too large при отправке 1гб файла
если в nginx конфиге прописано что max_client_body_size 2048M
А это кстати интересный вопрос, если не секрет, то можно подробностей?
источник

D

Dmitry in symfony
Alexander Kaluzhsky
А это кстати интересный вопрос, если не секрет, то можно подробностей?
да все просто, nuxt proxy module сбоит :)
источник

D

Dmitry in symfony
но перед этим нужно было задать вопросы уточняющие
а какой стек ?
откуда куда идет запрос ?
как высылается файл?
какой протокол?
источник

AC

Artur Chobanyan in symfony
@Jokaorgua у вас прилетает 10 к аналитики в секунду, предложите базу?
источник

D

Dmitry in symfony
Artur Chobanyan
@Jokaorgua у вас прилетает 10 к аналитики в секунду, предложите базу?
с пол пинка или под прод ?
источник

AC

Artur Chobanyan in symfony
Dmitry
с пол пинка или под прод ?
Прод
источник

D

Dmitry in symfony
о чем аналитика ? как ее будут использовать ?
источник

AC

Artur Chobanyan in symfony
Агрегации деать
источник

D

Dmitry in symfony
будут ли группировки ? расчитывать ли на сложные аналитические процедуры для расчета хрен пойми чего?
источник

AC

Artur Chobanyan in symfony
Да будут
источник

D

Dmitry in symfony
можно ли аггрегацию аналитики делать ? за сколко времени нужно хранить данные ?
источник

AK

Alexander Kaluzhsky in symfony
Artur Chobanyan
@Jokaorgua у вас прилетает 10 к аналитики в секунду, предложите базу?
какой-то хадуп или кликхаус.
Нужно понять структуру этой аналитики
источник

AK

Alexander Kaluzhsky in symfony
и дальнейшие операции
источник

AC

Artur Chobanyan in symfony
Dmitry
можно ли аггрегацию аналитики делать ? за сколко времени нужно хранить данные ?
Да, навсегда
источник

D

Dmitry in symfony
есть ли графики прогнозов увеличения нагрузки ?
источник

AC

Artur Chobanyan in symfony
Dmitry
есть ли графики прогнозов увеличения нагрузки ?
Нет
источник

AC

Artur Chobanyan in symfony
Alexander Kaluzhsky
какой-то хадуп или кликхаус.
Нужно понять структуру этой аналитики
Отлично, у нас кликхаус. Теперь запросов стало 100 к и диск тупит из за инсертов, ваши действия?
источник

D

Dmitry in symfony
ну тогда с пол пинка я бы попробовал писать все в колоночную базу аля кликхаус - быстрая запись
далее смотреть по потребностям, если возможностей языка кликхауса недостаточно для отчетов, то возможно аггрегация в какой нибудь постгрес для отчетов, однако продолжать все хранить в кликхаусе
источник

D

Dmitry in symfony
Artur Chobanyan
Отлично, у нас кликхаус. Теперь запросов стало 100 к и диск тупит из за инсертов, ваши действия?
кликхаус хавает 200к в секунд легко на одной машине, масштабируется просто влет на десятки машин
источник