В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

2633 membersпожаловаться на группу
2021 July 09

ЕГ

Евгений Глотов... in Data Engineers
Надо всё тестировать руками, проверять, не поменялись ли объёмы данных, может где-то перестало в память влезать и начало на диск скидываться, может где-то броадкаст перестал пролезать, может сеть тупит, может диск сдох, но при этом через час отвечает, что он живой, и хадуп не выкидывает ноду из кластера
источник
18:40пожаловаться#1

ПФ

Паша Финкельштейн... in Data Engineers
Не-не, ни в коем разе, вся память нативная, никакого оверхеда
источник
18:46пожаловаться#2

rG

rpuropuu Greeg'O'Rii... in Data Engineers
Нашел крутую книгу по спарку, а ей 6 лет (.. искать новее или для базы сойдет?
источник
18:54пожаловаться#3

rG

rpuropuu Greeg'O'Rii... in Data Engineers
Цель - научится выгребать данные для табло из кассандры и чего-то там ещё.
источник
18:55пожаловаться#4

GP

Grigory Pomadchin in Data Engineers
это что за книга такая
источник
18:55пожаловаться#5

rG

rpuropuu Greeg'O'Rii... in Data Engineers
Изучаем спарк. Молниеносный анализ данных.
источник
18:56пожаловаться#6

NN

No Name in Data Engineers
В принципе, для того, чтобы такую задачу решить, книга особо не нужна.
источник
18:56пожаловаться#7

rG

rpuropuu Greeg'O'Rii... in Data Engineers
Spark
источник
18:56пожаловаться#8

SO

Simon Osipov in Data Engineers
Холден скорее всего
источник
18:56пожаловаться#9

SO

Simon Osipov in Data Engineers
Там вторая версия была вроде
источник
18:56пожаловаться#10

rG

rpuropuu Greeg'O'Rii... in Data Engineers
PySpark сразу?
источник
18:56пожаловаться#11

NN

No Name in Data Engineers
Лучше spark: the definitive guide, если хочется поглубже разобраться, я уже говорил
источник
18:57пожаловаться#12

NN

No Name in Data Engineers
Как удобнее, любое апи, хоть C#, хоть Kotlin
источник
18:57пожаловаться#13

rG

rpuropuu Greeg'O'Rii... in Data Engineers
Да, я записал. Английское после русского хотел читать.
источник
18:57пожаловаться#14

SO

Simon Osipov in Data Engineers
А не, во норм
источник
18:58пожаловаться#15

SO

Simon Osipov in Data Engineers
https://databricks.com/p/ebook/learning-spark-from-oreilly
Databricks
O’Reilly Learning Spark Second Edition | Databricks
Apache SparkTM has become the de-facto standard for big data processing and analytics. Spark’s ease of use, versatility, and speed has changed the way that teams solve data problems — and that’s fostered an ecosystem of technologies around it, including Delta Lake for reliable data lakes, MLflow for the machine learning lifecycle, and Koalas for bringing the pandas API to spark.
источник
18:58пожаловаться#16

rG

rpuropuu Greeg'O'Rii... in Data Engineers
С++ возможен? О_о
источник
18:58пожаловаться#17

NN

No Name in Data Engineers
Нет
источник
18:58пожаловаться#18

SO

Simon Osipov in Data Engineers
Вот эта новая, вторая версия
источник
18:59пожаловаться#19

SO

Simon Osipov in Data Engineers
И конечно же, заглянуть сюда

https://t.me/moscowspark
источник
18:59пожаловаться#20