Size: a a a

2021 September 19

ЕГ

Евгений Глотов... in Data Engineers
Может мне конечно на пенсию пора)
источник

ПФ

Паша Финкельштейн... in Data Engineers
Слушай, если ты можешь писать качественный поддерживаемый код на С++ - ты потрясающе исключение. Большинство не может ничего из этого, большинство из оставшихся не могут одного из двух
источник

ЕГ

Евгений Глотов... in Data Engineers
Ну то есть вроде как всё то же самое, но ни одна привычная конструкция, которая во всех языках +- одинаковая, не встретилась)
источник

Б

Борис in Data Engineers
Ну или какой нибудь туториал почитать :) "8 часов дебага заменяют 15 минут чтения документации"
источник

ПФ

Паша Финкельштейн... in Data Engineers
Но в общем я сколько ни смотрел опенсорс проектов на котлине - весь код очень понятный когда поймёшь как вообще делаются приложения на Андроиде. Все эти активати с фрагментами, интенты и оптимизации типа кодогенерации
источник

ЕГ

Евгений Глотов... in Data Engineers
Ну да, это тоже мозг взрывает человеку, который последние несколько лет жизни потратил на спарк сабмиты)
источник

ПФ

Паша Финкельштейн... in Data Engineers
Это, как ты понимаешь, общая проблема, никак особо не связанная с языком :)
источник
2021 September 20

ДК

Дмитро Козак... in Data Engineers
Привет, у меня проблема с yarn
после запуска start-yarn.sh
Starting resourcemanager
Starting nodemanagers

ничего не происходит, в jps не вижу его
источник

GP

Grigory Pomadchin in Data Engineers
Привет! посмотри логи
источник

SO

Simon Osipov in Data Engineers
А что, есть кто сегодня на Saint HighLoad? Го нетворкаться и развиртуализироваться…
источник

СХ

Старый Хрыч... in Data Engineers
источник

SO

Simon Osipov in Data Engineers
Ты чат не перепутал?)
источник

СХ

Старый Хрыч... in Data Engineers
hive.exec.parallel=false
при этом в oozie нет потоков, а эта хрень всё равно продолжает расти.
сталкивался кто с таким?
источник

АР

Андрей Радченко... in Data Engineers
Доброе утро. Товарищи, есть ли у кого-то возможность поделиться репой hdp 3.1.*?
источник

СХ

Старый Хрыч... in Data Engineers
нет, я просто уже реально не понимаю, как эта хрень продолжает расти, даже если нет потребителей
источник

СХ

Старый Хрыч... in Data Engineers
бигдоп и собирайте свой
источник

СХ

Старый Хрыч... in Data Engineers
желательно брать 3.3.1 потому что там уже 11 java runtime и zgc
источник

IK

Ivan Krovyakov in Data Engineers
Всем привет!

Я с недавних пор в Яндекс.Облаке, мы планируем провести митап вокруг Hadoop в начале ноября и сейчас собираем интересные проекты и доклады. Тематика не столько про разработку, сколько про интересные темы вокруг эксплуатации: миграции между версиями/дистрибутивами, внутреннее тестирование новых технологий и форматов хранения, оркестрация задач, оптимизация/тюнинг, приземление специфичных нагрузок и т.п.

Если вам попадались непростые задачки такого плана, вы их успешно решили (или, наоборот, набили шишки и теперь точно знаете, как делать не надо) и хотите рассказать об этом сообществу - пишите мне в лс, слоты для выступлений еще есть 🙂
источник

D

Dmitry in Data Engineers
А есть тут кто с HDInsigth знакомый ? разные типы нагрузок они предлагают на разных кластерах пускать, а как несколько типов кластеров на один adls gen 2 усадить я не врубаюсь. вроде в доке есть статья, что каждый кластер в свой фолдер может писать, но я не смог задать фолдер кластеру. задал вопрос, единственный ответ какой-то невпопад
https://stackoverflow.com/questions/69158401/multiple-hdinsight-clusters-with-single-adls-gen2-storage
источник

T

T in Data Engineers
Пройди рекурсивно да удали subrows. можно даже из начального объекта если данные совсем не нужны
источник