В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

1724 membersпожаловаться на группу
2019 December 06

DZ

Dmitry Zuev in Data Engineers
Dmitry Zuev
spark.read
       .csv(spark.sparkContext.textFile(sourcePath, partitions).toDS())
такое получилось?
источник
14:41пожаловаться#1

d

ddre_z in Data Engineers
нет метода toDS
источник
14:41пожаловаться#2

d

ddre_z in Data Engineers
гуглю как перевести
источник
14:41пожаловаться#3

В

Вадим in Data Engineers
ребят, есть у кого нибудь опыт импортирования avro в clickhouse?
источник
14:41пожаловаться#4

DZ

Dmitry Zuev in Data Engineers
ddre_z
гуглю как перевести
имплиситы импорти
источник
14:41пожаловаться#5

d

ddre_z in Data Engineers
точно
источник
14:41пожаловаться#6

d

ddre_z in Data Engineers
забыл
источник
14:41пожаловаться#7

d

ddre_z in Data Engineers
можно напомнить куда схему пихать?
источник
14:47пожаловаться#8

d

ddre_z in Data Engineers
https://pastebin.com/ExFTXxUd
Pastebin
import org.apache.spark.SparkContext  import org.apache.spark.sql.{DataFrame, Da - Pastebin.com
источник
14:47пожаловаться#9

N

Nikita Blagodarnyy in Data Engineers
Вадим
ребят, есть у кого нибудь опыт импортирования avro в clickhouse?
https://clickhouse.yandex/docs/ru/operations/table_engines/hdfs/
источник
14:47пожаловаться#10

N

Nikita Blagodarnyy in Data Engineers
а вообще спроси в https://t.me/clickhouse_ru
Telegram
ClickHouse не тормозит
Обсуждаем clickhouse.yandex
источник
14:48пожаловаться#11

В

Вадим in Data Engineers
отлично вообще, подходит
источник
14:48пожаловаться#12

В

Вадим in Data Engineers
Никит спасибо
источник
14:48пожаловаться#13

d

ddre_z in Data Engineers
ddre_z
можно напомнить куда схему пихать?
а, я нашел
источник
14:48пожаловаться#14

d

ddre_z in Data Engineers
все ок
источник
14:48пожаловаться#15

DZ

Dmitry Zuev in Data Engineers
https://stackoverflow.com/questions/39926411/provide-schema-while-reading-csv-file-as-a-dataframe
Stack Overflow
Provide schema while reading csv file as a dataframe
I am trying to read a csv file into a dataframe. I know what the schema of my dataframe should be since I know my csv file. Also I am using spark csv package to read the file. I trying to specify the
источник
14:48пожаловаться#16

DZ

Dmitry Zuev in Data Engineers
погуглил за тебя
источник
14:48пожаловаться#17

d

ddre_z in Data Engineers
сказал что нашел -_-
источник
14:49пожаловаться#18

d

ddre_z in Data Engineers
но все равно спасибо
источник
14:49пожаловаться#19

DZ

Dmitry Zuev in Data Engineers
ток это тебе не поможет
источник
14:49пожаловаться#20