В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

2383 membersпожаловаться на группу
2021 April 12

AS

Andrey Smirnov in Data Engineers
так, а с чем совмещать собираетесь?
источник
21:53пожаловаться#1

UD

Uncel Duk in Data Engineers
3.1, если верить джире, оно упадет
источник
21:54пожаловаться#2

K

KrivdaTheTriewe in Data Engineers
а выставить легаси протокол?
источник
21:55пожаловаться#3

AS

Andrey Smirnov in Data Engineers
вы хотите одновременно работу 2 и 3 спарка в рамках одного кластера?
источник
21:55пожаловаться#4

GP

Grigory Pomadchin in Data Engineers
@xhumanoid помоему помоему имел инсайты по совместимости
источник
21:55пожаловаться#5

UD

Uncel Duk in Data Engineers
Да
источник
21:55пожаловаться#6

AS

Andrey Smirnov in Data Engineers
не, таких экспериментов не ставил, даже не знал что это возможно
источник
21:56пожаловаться#7

K

KrivdaTheTriewe in Data Engineers
попробуйте легаси протокол тру
источник
21:57пожаловаться#8

UD

Uncel Duk in Data Engineers
Спасибо, попробую
источник
21:57пожаловаться#9

UD

Uncel Duk in Data Engineers
https://github.com/apache/spark/pull/31936
GitHub
[SPARK-34828][YARN] Make shuffle service name configurable on client side and allow for classpath-based config override on server side by xkrogen · Pull Request #31936 · apache/spark
What changes were proposed in this pull request?
Add a new config, spark.shuffle.service.name, which allows for Spark applications to look for a YARN shuffle service which is defined at a name othe...
источник
22:06пожаловаться#10

UD

Uncel Duk in Data Engineers
Вот костыль для этого
источник
22:06пожаловаться#11
2021 April 13

A

Alex in Data Engineers
Этот костыль в hdp уже больше 1.5 лет, как запускать разные шафл сервисы в пределах одного кластера
источник
05:03пожаловаться#12

A

Alex in Data Engineers
Хотя нет, там даже более упрощённо, без оверрайда, просто выбрать из существующих

Работало норм
источник
05:04пожаловаться#13

AZ

Anton Zadorozhniy in Data Engineers
Google продолжает эксперименты вокруг Datalog-производных, мб кому-то будет интересно https://logica.dev
источник
07:05пожаловаться#14

R

Roman in Data Engineers
Посмотрел примеры кода их...чет выглядит не эргономично
источник
08:10пожаловаться#15

ПБ

Повелитель Бури... in Data Engineers
Что люди не придумывают, чтобы не учить sql )
источник
09:04пожаловаться#16

AZ

Anton Zadorozhniy in Data Engineers
Эт скорее люди придумывают чтобы расширять и тестировать SQL
источник
09:36пожаловаться#17

V

Vol in Data Engineers
доброе утро
подскажите пожалуйста о комбинации колоночных таблиц и сложных (struct) типов
для оптимизации нужно выбирать только колонки, с которым надо работать
Вопрос: в случае структурного типа стоит ли выбирать только нужные поля со структуры или она все равно будет целая читаться?
источник
10:16пожаловаться#18

ЕП

Евгений Погребняк... in Data Engineers
:-

это такое присваивание
источник
12:49пожаловаться#19

ЕП

Евгений Погребняк... in Data Engineers
?
источник
12:49пожаловаться#20