AD
чтобы было понимание о high risk high reward стратегиях, а не только общепринятый и безопасный путь
ещё раз, нужно сначала в совершенстве освоить безопасный путь
Size: a a a
2021 March 25
NN
ещё раз, нужно сначала в совершенстве освоить безопасный путь
Ну мб не в совершенстве, а на крепкое хорошо. Иначе тогда совет этот давать почти некому.
AZ
куда-то вообще ушли, все получилось как обычно, Алексей хотел остро набросить - ему все пояснили
РБ
Спасибо
2021 March 26
P
Добрый вечер! выбираем инструмент потоковой обработки данных: флинк или спарк ? по отзывам спарк больше используют, но тут может сила привычки )
Под флинк на ура делается деплой в куб, все понятно и просто👍
P
Кто-нибудь может рассказать как в pyspark происходит магия исполнения питон кода? Мой коллега думает, что на каждом ноде выполняется питон интерпретатор и настаивает на
def main():
blah
if __name__ == "__main__":
main()
def main():
blah
if __name__ == "__main__":
main()
Не давайте коллеге писать джобы
ПБ
Под флинк на ура делается деплой в куб, все понятно и просто👍
Начали пробовать спарк стриминг, столкнулись с тем что джобы иногда "фризятся"-останавливаются, приходится в ручную перезапускать. Думаем или копать или флинк пробовать
P
Начали пробовать спарк стриминг, столкнулись с тем что джобы иногда "фризятся"-останавливаются, приходится в ручную перезапускать. Думаем или копать или флинк пробовать
Ы
A
Под флинк на ура делается деплой в куб, все понятно и просто👍
А вы какой оператор используете?
P
А вы какой оператор используете?
Безо всяких операторов. Job cluster
KS
Не давайте коллеге писать джобы
Почему?
P
Почему?
Понапишет вот этого всего main, init ипр
VG
Понапишет вот этого всего main, init ипр
В чем проблема main в pyspark-e?
Вы знаете, зачем нужна конструкция
?
Вы знаете, зачем нужна конструкция
if __name__ == '__main__'
?
VG
В тестах у вас с импортом проблем не возникает?)
P
В чем проблема main в pyspark-e?
Вы знаете, зачем нужна конструкция
?
Вы знаете, зачем нужна конструкция
if __name__ == '__main__'
?
Да не, с ней проблем нет, это нужно конечно
AB
Всем привет, никто не знает норм варик писать с флинка в редис юзая скалу 2.12?
у меня коннектор работал jedis но он под скалу 11 с 12 не пашет
у меня коннектор работал jedis но он под скалу 11 с 12 не пашет
P
Всем привет, никто не знает норм варик писать с флинка в редис юзая скалу 2.12?
у меня коннектор работал jedis но он под скалу 11 с 12 не пашет
у меня коннектор работал jedis но он под скалу 11 с 12 не пашет
Да норм че)
AB
Да норм че)
че норм? с скала 12 работает запись с флинка в редис??
P
че норм? с скала 12 работает запись с флинка в редис??
Норм писать из флинка в редис. А то, что возникают траблы с версиями, это хз, не эксперт по скале))