Size: a a a

2020 September 16

DZ

Dmitry Zuev in Data Engineers
Но в целом нет необходимости
источник

DZ

Dmitry Zuev in Data Engineers
Мы и так либо Спарк сабмитим, либо докер под запускаем
источник

ДН

Дмитрий Негреев... in Data Engineers
Интересно нормально ли себя куб будет чувствовать, если я сотнями буду поды зажигать на минутные, а и то и меньше по длительности задачки
источник

DZ

Dmitry Zuev in Data Engineers
Норм, главное что с нагрузкой
источник

DZ

Dmitry Zuev in Data Engineers
Кубер по дефолту с ла выше 70% не оч
источник

DZ

Dmitry Zuev in Data Engineers
Но можно кастомный выбрать
источник

AZ

Anton Zadorozhniy in Data Engineers
Дмитрий Негреев
Интересно нормально ли себя куб будет чувствовать, если я сотнями буду поды зажигать на минутные, а и то и меньше по длительности задачки
ему все равно
источник

ДН

Дмитрий Негреев... in Data Engineers
Да по идее там такая мелочь, что дефолтных 100mi и 128 метров хватать должно, мож чуть больше.
источник

AZ

Anton Zadorozhniy in Data Engineers
другое дело что с такой плотностью планирования мб стоит посмотреть на FaaS решения
источник

AZ

Anton Zadorozhniy in Data Engineers
(если latency прям очень нужно)
источник

ДН

Дмитрий Негреев... in Data Engineers
Погрешность не проблема, да и всегда кмк можно селери просто поднять, если реще надо кучу всякой мелочи запускать.
источник

VK

Victor Karabedyants in Data Engineers
Привет, есть тут коллеги которые хорошо знают  Hive ? необходима конусльтация
источник

VK

Victor Karabedyants in Data Engineers
спасибо
источник

N

Nikita Blagodarnyy in Data Engineers
Ты спроси, а там видно будет.
источник
2020 September 17

M

Makhmut in Data Engineers
добрый день , сорри за офтоп
есть кто знает
вопрос по эквивалентному коду оракл на постгре
подскажите пожалуйста
как можно описать этот код на оракле в постгре
begin
for dt in (
with counter as (
select level -1 as id from dual
connect by level <= 12
)
select add_months(to_date('01.01.2017','dd.mm.yyyy'),id) dates from counter
) loop
schema.procedure(dt.dates);
end loop;
end;
источник

ДН

Дмитрий Негреев... in Data Engineers
Makhmut
добрый день , сорри за офтоп
есть кто знает
вопрос по эквивалентному коду оракл на постгре
подскажите пожалуйста
как можно описать этот код на оракле в постгре
begin
for dt in (
with counter as (
select level -1 as id from dual
connect by level <= 12
)
select add_months(to_date('01.01.2017','dd.mm.yyyy'),id) dates from counter
) loop
schema.procedure(dt.dates);
end loop;
end;
Да примерно так же, connect by просто переделайте на with recursive, ну и посмотрите можно ли анонимные блоки в постгрисе запускать
источник

AZ

Anton Zadorozhniy in Data Engineers
Makhmut
добрый день , сорри за офтоп
есть кто знает
вопрос по эквивалентному коду оракл на постгре
подскажите пожалуйста
как можно описать этот код на оракле в постгре
begin
for dt in (
with counter as (
select level -1 as id from dual
connect by level <= 12
)
select add_months(to_date('01.01.2017','dd.mm.yyyy'),id) dates from counter
) loop
schema.procedure(dt.dates);
end loop;
end;
обязательно хранимкой вам? можно из generate_series выбрать, причем он по-моему сразу даты умеет
источник

M

Makhmut in Data Engineers
Да вот не разбираюсь
Из хд (оракл) перенесли на постгре некоторые данные , и хочу залить данные
Я так заливал , а в постгре еще не разобрался а дедлайн горит
источник

VK

Victor Karabedyants in Data Engineers
Привет, Ребят,. задачи вот такие,
источник

VK

Victor Karabedyants in Data Engineers
Basic Hive interaction using Hue
Basic Hive interaction using Beeline
Managed and External tables using Beeline  
Partitioned tables
Hive ACID tables
источник