Телеграмм чат группы hadoopusers страница 1763

Size: a a a

Data Engineers

1724 membersпожаловаться на группу

2019 November 13

ЕГ

Евгений Глотов in Data Engineers

Хотя не, если сторонняя библиотека использует min и max, то будет фиаско)

источник

17:52пожаловаться #1

Sergey Sheremeta in Data Engineers

всем привет!
наверняка. тут водятся знатоки JMeter…
подскажите. пожалуйста, могу ли я сгенерировать в JMeter некий профиль нагрузки и ЗАФИКСИРОВАТЬ его где-нибудь? то есть чтобы пока не перегенерирую явно этот профиль - все запуски нагрузочных тестов были детерминированными

источник

18:19пожаловаться #2

Sergey Sheremeta in Data Engineers

кстати, может кинете ссылку на чатик QA-инженеров?

источник

18:21пожаловаться #3

Nikita Ilin in Data Engineers

Всем привет! Кто-нибудь работал с вертикой? Интересует, как из кластера Вертики наиболее оптимально и быстро забирать большой объём данных и перегружать в другую систему с «горячими» данными для аналитики

источник

21:31пожаловаться #4

KrivdaTheTriewe in Data Engineers

Nikita Ilin

А данные где

источник

21:39пожаловаться #5

Nikita Ilin in Data Engineers

В вертике. Хочется понять как с помощью jdbc наиболее быстро перекачивать данные сразу из нескольких кластеров

источник

21:40пожаловаться #6

KrivdaTheTriewe in Data Engineers

Вертика умеет сама брать из хадупа , в паркете и орке, но она не поддерживает комплексные типы для тока , а для паркета не знаю

источник

21:40пожаловаться #7

Nikita Ilin in Data Engineers

Я хочу не в вертику, а из Вертики наоборот

источник

21:41пожаловаться #8

Anton Zadorozhniy in Data Engineers

Nikita Ilin

Я хочу не в вертику, а из Вертики наоборот

Вам куда надо? Есть всякие экспорт механизмы в самой вертике, и у ETL средств, опишите задачу полнее

источник

22:32пожаловаться #9

Nikita Ilin in Data Engineers

В BI платформу. Через jdbc желательно)

источник

22:33пожаловаться #10

Nikita Ilin in Data Engineers

Условно в Qlik или PowerBi

источник

22:33пожаловаться #11

Anton Zadorozhniy in Data Engineers

Nikita Ilin

В BI платформу. Через jdbc желательно)

я не уверен что понял, вы хотите не выполнять запросы от BI на вертике, а выгрузить в файлы чтобы отдать их вашему BI?

источник

22:41пожаловаться #12

Nikita Ilin in Data Engineers

Хочу подключиться напрямую из Qlik в вертику и выгрузить данные в in-memory хранилище Qlik

источник

22:42пожаловаться #13

Anton Zadorozhniy in Data Engineers

и чем вам не подходит стандартный способ?

источник

22:45пожаловаться #14

Nikita Ilin in Data Engineers

У меня вопрос какой наиболее оптимальный способ выгрузки через jdbc. Если в вертике предположим 10 нод, я могу как-то сразу выгружать из 10 нод, или вертика всегда отдаёт только через одну?

источник

22:53пожаловаться #15

Anton Zadorozhniy in Data Engineers

насколько я помню клиенты Vertica поддерживают много резалтсетов и балансировку, так что оно неплохо скейлилось (вам нужно посмотреть документацию на конкретного клиента)

источник

22:56пожаловаться #16

Anton Zadorozhniy in Data Engineers

как вариант посмотрите EXPORT TO PARQUET, оно работает параллельно со всех узлов

источник

22:56пожаловаться #17

Nikita Ilin in Data Engineers

Ок. Спасибо

источник

22:57пожаловаться #18

Max Efremov in Data Engineers

Пс, кто-то с касандрой из спринга работал через реактивные репозитории?