Size: a a a

2019 October 21

A

Alex in Data Engineers
@anon43 пару туториалов, не нужно каждый раз паковать и слать на кластер, а потом по ui тыкаться
источник

A4

Anon 43 in Data Engineers
Grigory Pomadchin
parseInt чувситвельная функция; отсутпы пробелы не уберешь - Оно ничего не распарсит
даже если убрать parseInit, и вручную инициализировать a,b,c числами (1 2 3 например),
все равно ничего не выводит
источник

GP

Grigory Pomadchin in Data Engineers
Anon 43
даже если убрать parseInit, и вручную инициализировать a,b,c числами (1 2 3 например),
все равно ничего не выводит
глянь лучше на удобный способ дебажить чтоб принты не ловить))
а вообще должен печатать
источник

PO

Pavel Okunev in Data Engineers
Anon 43
Почему не работает?

public class IntSumReducer extends Reducer<Text,Text,Text,IntWritable> {
   private IntWritable result = new IntWritable();
   public void reduce(Text key, Text values, Context context) throws IOException, InterruptedException {
   String[] items = values.split(";");
   int a = Integer.parseInt(items[0], 10);
   int b = Integer.parseInt(items[1], 10);
   int c = Integer.parseInt(items[2], 10);
   int sum = (2 * a * b) * Math.abs(c + (4 * a));
 result.set(sum);
 context.write(key, result);
   }
}
По моему тут функция reduce не та, у values д.б. тип Iterable<Text> вроде бы
источник

K

KrivdaTheTriewe in Data Engineers
источник

D

Den in Data Engineers
чем он пизже thrift?
источник

M

Mi in Data Engineers
Den
чем он пизже thrift?
мне кажется у них немного разное назначение
источник

R

Renarde in Data Engineers
всем привет, вопрос - кто нибудь пробовал пользовать локальные тесты для PrestoSQL? При попытке запустить тестовый сервер с версии 311 ловлю что-то невнятное:
Exception encountered when invoking run on a nested suite - Unable to create injector, see the following errors:

1) A binding to java.util.Set<io.prestosql.spi.procedure.Procedure> was already configured at io.prestosql.connector.system.SystemConnectorModule.configure(SystemConnectorModule.java:73)
источник

R

Renarde in Data Engineers
беглый гуглеж наводит разве что на уныние...
источник

N

Nikita Blagodarnyy in Data Engineers
Кто-нибудь юзал вот эту штуку? Как она вообще себя чувствует?
http://www.quartz-scheduler.org
источник

K

KrivdaTheTriewe in Data Engineers
источник

K

KrivdaTheTriewe in Data Engineers
Nikita Blagodarnyy
Кто-нибудь юзал вот эту штуку? Как она вообще себя чувствует?
http://www.quartz-scheduler.org
всё пытаетесь избежать эирфлоу?
источник

N

Nikita Blagodarnyy in Data Engineers
Да нет как таковой цели чего-то избежать.
источник

S

Stanislav in Data Engineers
Nikita Blagodarnyy
Кто-нибудь юзал вот эту штуку? Как она вообще себя чувствует?
http://www.quartz-scheduler.org
А чем оно лучше Дженкинса? Более нишевое? Видел только его упоминание в гоблине
источник

SA

Sergey Akopyan in Data Engineers
Stanislav
А чем оно лучше Дженкинса? Более нишевое? Видел только его упоминание в гоблине
Ну как бы кварц это только лишь планировщик причем очень хорошо параметризованный. А jenkins всего лишь инструмент для сборок и деплоя, а не запуска по планировщику (хотя такой сценарий тоже возможен, но не специфичен для данного инструмента).
источник

UD

Uncel Duk in Data Engineers
источник

I

Igor in Data Engineers
Есть сомнения в документации
источник

I

Igor in Data Engineers
А, ну я дочитал до "Who Is Using DolphinScheduler" и тогда понятнее стало
источник

VS

Vitaliy Shevchenko in Data Engineers
Ребят а по поводу размещения вакансий кому писать ?
источник

DY

Dan Y in Data Engineers
источник