Size: a a a

2021 July 22

AG

Arsen Gumin in Data Engineers
А это в дев версии, сори
источник

AG

Arsen Gumin in Data Engineers
Тогда вопрос отпал
источник
2021 July 23

М

Михаил in Data Engineers
Народ привет, собрал докер образ с lightgbm, заметил что на разных процессорах - разная скорость выполнения. Может кто сталкивался?
источник

E

Evgeny in Data Engineers
Звучит логично, если не использовать gpu
источник

М

Михаил in Data Engineers
нашел решение params = {"num_threads":8}
источник

М

Михаил in Data Engineers
источник

ET

E T in Data Engineers
Привет !
У кого был опыт использования bigquery на DataBricks ?
источник
2021 July 24

C

Combot in Data Engineers
Matthew Walker has been banned! Reason: CAS ban.
источник

e

er@essbase.ru in Data Engineers
мне кажется что сейчас началась гонка на выбывание между платформами
-  все больше бесплатных курсов от вендоров
например к DataBricks ( https://academy.databricks.com/learning-paths )
можно добавить Azure ( https://docs.microsoft.com/ru-ru/learn/browse/?expanded=m365&filter-products=powe&products=power-bi )
и Informatica Cloud ( https://now.informatica.com/foundation-level-certification-series.html )
источник

E

El-Yaz in Data Engineers
привет!
я правильно понимаю что BigTable от GCP это аналог DynamoDB от AWS - document-oriented DB?
источник

e

er@essbase.ru in Data Engineers
нет
источник

e

er@essbase.ru in Data Engineers
первое пакетная обработка , второе работа с объектами .
надо сравнивать
BigTable vs RedShift vs SnowFlake
источник

AZ

Anton Zadorozhniy in Data Engineers
Это не документарные базы, это wide-column store дизайны (BigTable это прообраз HBase, DynamoDB это дизайн похожий на Cassandra), в остальном схоже - managed NoSQL database
источник

E

El-Yaz in Data Engineers
Но Redshift - DWH. А DWH от GCP - BigQuery.
Соответственно в сравнение идёт RedShift vs BigQuery vs SnowFlake
источник

e

er@essbase.ru in Data Engineers
ок
источник

e

er@essbase.ru in Data Engineers
Народ , как вам вот такой вброс  
 BigData становится всего лишь инструментом ETL для BI
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
А в чем вброс?
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
источник

E

El-Yaz in Data Engineers
У нас есть есть 4 типа NoSQL Dabs: key-value store, document store, column-oriented database, and graph database
Кассандра относится к column oriented db. Hbase - туда же, верно? Монга - document store. А динамка - туда же?
Либо я не пойму как в column oriented можно засовывать разные типы значение (в случае с Динамо)
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
Hbase это же key-value
источник