В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

1922 membersпожаловаться на группу
2020 August 13

GP

Grigory Pomadchin in Data Engineers
Andrey Sutugin
Да мне надо тупо финансовому директору предоставить список контор, кто может, что бы я для компании не стал пресловутым bus factor-ом, что-то в моей конторе не верят, что можно легко найти контору на аутсорс хадуповского зоопарка
давай лучше в data jobs; слишком много полеимки будет
источник
23:51пожаловаться#1

AS

Andrey Sutugin in Data Engineers
Anton Kovalenko
Ну да, это совсем другое )
как правильно это назвать, а то я с терминологией слабоват
источник
23:51пожаловаться#2

AS

Andrey Sutugin in Data Engineers
Grigory Pomadchin
давай лучше в data jobs; слишком много полеимки будет
ок, сорян
источник
23:51пожаловаться#3

N

Nikita Blagodarnyy in Data Engineers
Grigory Pomadchin
давай лучше в data jobs; слишком много полеимки будет
форкнулись уже туда
источник
23:52пожаловаться#4

A

Anton Kovalenko in Data Engineers
Andrey Sutugin
Наверное я не правильно сформулировал, не аутсорс хадупа,  а создание etl для загрузки данных в hdfs/hive из различных источников РСУБД(mssql/postgres/mysql/etc)/bigquery/какие-то абстрактные crm
ДИСы например на etl собаку съели, но на Информатике. Ну и многие интеграторы в этом шарят
источник
23:53пожаловаться#5
2020 August 14

AM

Al Mi in Data Engineers
Aleksey
Линки делаете между каждым хабом (если есть FK связь между ними). Дальше уже начинается вопрос с оптимизацией: если пол - это вовсе не справочник (т.е. его нет как отдельной бизнес сущности), то зачем хаб для него - можно и в сателлит положить.
Админы, книжку по волту тут можно выложить?
источник
00:00пожаловаться#6

GP

Grigory Pomadchin in Data Engineers
Al Mi
Админы, книжку по волту тут можно выложить?
конечно же версию для ознакомления?
источник
00:09пожаловаться#7

N

Nikita Blagodarnyy in Data Engineers
может он[а] сам[a] написал[a]
источник
00:10пожаловаться#8

AM

Al Mi in Data Engineers
Grigory Pomadchin
конечно же версию для ознакомления?
Естественно, после ознакомления уничтожить
источник
00:29пожаловаться#9

GP

Grigory Pomadchin in Data Engineers
Al Mi
Естественно, после ознакомления уничтожить
или купить версию у автора; можно конечно выкладывать сюда
источник
00:30пожаловаться#10

SS

Sergey Sheremeta in Data Engineers
Al Mi
Админы, книжку по волту тут можно выложить?
а можно в личку? что за книжка-то? от дяди Дэна?
источник
00:55пожаловаться#11

GP

Grigory Pomadchin in Data Engineers
можно и не в личку*
источник
00:56пожаловаться#12

AM

Al Mi in Data Engineers
Не могу найти, от дэна да, подключу винт через час
источник
01:29пожаловаться#13

AM

Al Mi in Data Engineers
Building_a_Scalable_Data_Warehouse_With_Data_Vault_2.0.pdf
(51.25 Мб)
Emailing Building_a_Scalable_Data_Warehouse_With_Data_Vault_2.0.pdf
источник
07:12пожаловаться#14

SS

Sergey Sheremeta in Data Engineers
sticker.webp
(38.04 Кб)
источник
09:14пожаловаться#15

VA

Vladislav Akatov in Data Engineers
В Airflow использую FTPHook, BashOperator за несколько секунд падает по таймауту при извлечении файла с данными: 
airflow.exceptions.AirflowTaskTimeout: Timeout

При этом для самого BashOperator в определении DAGа увеличил 
execution_timeout
до десяти минут - не работает. Никто не ел такое?
источник
09:19пожаловаться#16

S

Stanislav in Data Engineers
Vladislav Akatov
В Airflow использую FTPHook, BashOperator за несколько секунд падает по таймауту при извлечении файла с данными: 
airflow.exceptions.AirflowTaskTimeout: Timeout

При этом для самого BashOperator в определении DAGа увеличил 
execution_timeout
до десяти минут - не работает. Никто не ел такое?
https://t.me/ruairflow
Telegram
Airflow
Русскоязычное сообщество Apache Airflow
источник
11:02пожаловаться#17

S

Stanislav in Data Engineers
брр
источник
11:02пожаловаться#18

AK

Andrew Konstantinov in Data Engineers
Привет!Что кто использует в качестве feature storage для мл ?
источник
11:15пожаловаться#19

DZ

Dmitry Zuev in Data Engineers
Andrew Konstantinov
Привет!Что кто использует в качестве feature storage для мл ?
Hdfs
источник
11:16пожаловаться#20