ME
Кстати кто использует докер на винде, особых проблем нет?
с виртуалбоксом конфликтует, я забил
Size: a a a
2019 December 16
N
На докер? Или на винду?
ME
На докер)
ME
Юзаю вагрант, который поднимает мне виртуалку и там контейнеры запускает
ME
точнее, контейнеры ансибрюлом запускаются, вагрант не умеет сразу несколько запускать(
M
Коллеги поделитесь, как вы юнит тесты со спарком запускаете? Как сделать так, чтобы контекст со спарком заводился один раз?
AE
отдельным тредом поднимать. но вы не делайте так, это нехорошо.
AP
Коллеги поделитесь, как вы юнит тесты со спарком запускаете? Как сделать так, чтобы контекст со спарком заводился один раз?
Можешь попробовать SharedSparkSession / SharedSparkContext из юнитов самого Spark, @invade_r более подробно рассказывал на Moscow Spark#9 http://bit.ly/moscow_spark_slides, если готов положиться на их реализацию.
GP
Коллеги поделитесь, как вы юнит тесты со спарком запускаете? Как сделать так, чтобы контекст со спарком заводился один раз?
SparkSession.builder().config(conf).getOrCreate() если не хочется делать как было рассказано на москоуспаркеGP
т.е. откроется сессия на первом спарк тесте; а зкроется на килле жвм
все прмоежуточные будут конечно же попадать в гет клоз
все прмоежуточные будут конечно же попадать в гет клоз
AE
вопрос а зачем нужен грязный контекст. юнит тест на то и юнит, что проверяет нечто без внешних факторов.
2019 December 17
TZ
Коллеги, добрый день =)
У кого был опыт забора данных из ms sql server 8 (2000) при помощи nifi
Древняя база данных - перепробовал 5 видов драйверов но так и не смог подконектиться (((
Более менее есть коннект через jtds, но вылетает ошибка failed to process session due to null ((((
У кого был опыт забора данных из ms sql server 8 (2000) при помощи nifi
Древняя база данных - перепробовал 5 видов драйверов но так и не смог подконектиться (((
Более менее есть коннект через jtds, но вылетает ошибка failed to process session due to null ((((
AK
Это была ссылка для Тимура, но что народ попёр в найфайный чатик - довольно прикольно)
AB
Timur Zalimov
Коллеги, добрый день =)
У кого был опыт забора данных из ms sql server 8 (2000) при помощи nifi
Древняя база данных - перепробовал 5 видов драйверов но так и не смог подконектиться (((
Более менее есть коннект через jtds, но вылетает ошибка failed to process session due to null ((((
У кого был опыт забора данных из ms sql server 8 (2000) при помощи nifi
Древняя база данных - перепробовал 5 видов драйверов но так и не смог подконектиться (((
Более менее есть коннект через jtds, но вылетает ошибка failed to process session due to null ((((
Мне кажется там с любой интеграцией будут проблемы. Насколько помню решал вопрос так: формировал csv-выгрузки с помощью dts-пакетов, и результат уже забирал из файлов.
K
ребят,кто из терадаты геометрию гонял скупом, как правильно настроить маппинг полей? чтобы хотя бы как текст было
K
@dartov скажипожалуйста, есть нормальный маппинг для геоданных или нужно изворачиваться с вьюхой в самой терадате?
AZ
@dartov скажипожалуйста, есть нормальный маппинг для геоданных или нужно изворачиваться с вьюхой в самой терадате?
Geospatial тип? Он пока не поддерживается TDCH, но если вы напишите мне в дм имя клиента то я смогу как следует пнуть того кто рулит бэклогом..
K
st_geometry
AZ
Ну да, оно