AN
Всем привет, вопрос в амбари disk usage alert. Capacity Used: [95%, жреть больше всего non dfs как исправить это? Я просто не понимаю почему так жреть.
Size: a a a
2019 November 14
A
Зайти на машинку и посмотреть где ваше место ушло
A
Может кто-то активно логи пишет
AN
В данный момент не могу зайти( но я скину как будет возможность
神
Доброе утро. Подскажите, пожалуйста, умеет ли hive автоматически парсить схему из self-contained schema avro файлов?
DM
神風
Доброе утро. Подскажите, пожалуйста, умеет ли hive автоматически парсить схему из self-contained schema avro файлов?
神
Жаль.. Я пока примерно так и делаю. Указываю схему, которую достаю из файла, в tblproperties
神
@optician_owl спасибо
VS
Nikita Ilin
У меня вопрос какой наиболее оптимальный способ выгрузки через jdbc. Если в вертике предположим 10 нод, я могу как-то сразу выгружать из 10 нод, или вертика всегда отдаёт только через одну?
Не можете, почитайте документацию
VS
Можете при jdbc использовать mars для ускорения на клиенте, но нужны шустрые диски или ссд
VS
Ну и не рекомендую заниматься такой херней, все таки вертика сама лучше агрегаты считает
АЖ
А вроде у вертики есть прям спарк-коннектор
VS
IP
всем привет вот в этой строке падает ошибка на строке .groupBy("CITY").avg("SALES") тоесть в колонке "SALES" лежат стринги, не знаю как скастить к интеджеру или даблу, кто знает подскажите пож
M
всем привет вот в этой строке падает ошибка на строке .groupBy("CITY").avg("SALES") тоесть в колонке "SALES" лежат стринги, не знаю как скастить к интеджеру или даблу, кто знает подскажите пож
.withColumn("SALES_INT", df.SALES.cast(IntegerType))
DM
всем привет вот в этой строке падает ошибка на строке .groupBy("CITY").avg("SALES") тоесть в колонке "SALES" лежат стринги, не знаю как скастить к интеджеру или даблу, кто знает подскажите пож
https://www.google.com/search?q=${some_language} cast string to int
IP
https://www.google.com/search?q=${some_language} cast string to int
что то ничего не понятно
M
что то ничего не понятно
Намёк на то, что прежде чем что-то спрашивать в конфе проще сначала самому 10 секунд погуглить
M
а то получается что вы делегируете гуглёж на других людей
DM
особенно если это касатеся очень базовых вещей