MH
А вот эту часть не понял. Нужно к каждой дате применить какую-то трансформацию или что?
Тогда короче вопрос. Я объявил dataframe. Как наполнять его циклом?
Size: a a a
2019 October 31
ME
ммм, ну в принципе можно создать датафрейм из массива)
ME
хз, обычно датафрейм я создаю из файликов всяких с hdfs)
I
это типа
spark_context.parallelize(zip(["Don't", "do", "drugs"], ["Read", "from", "hdfs"])
?ME
df = spark.createDataFrame(если на питоне
[["001", 1], ["001", 901], ["002", 1], ["002", 901]],
["model", "second"]
)
ME
Но я чисто для локальной отладки трансформаций такое юзаю, если такое в реальной задаче получается, то нужен ли там спарк?
ME
Может панды какие-нить или ещё что-то...
N
Коллеги, никто вот такого в фениксе не ловил?
AB
@nblagodarnyy вы с Сашей попробовали конфиги потрогать?
S
Коллеги, никто вот такого в фениксе не ловил?
Она очень говорящая, особенно если работал с хбейз апи
DM
Привет всем, никто не в курсе можно ли в apache beam создать одновременно два KafkaIO.read()? Я хочу что бы у меня одновременно в приложении считывались 2 консюмер группы.
2019 November 01
DY
кто нибудь делал репорты на основе кассандры/сциллы? нужно рисовать таблицу и по ней графики рисовать немного. pentaho и jasper не работают с кассандрой как оказалось
R
кто нибудь делал репорты на основе кассандры/сциллы? нужно рисовать таблицу и по ней графики рисовать немного. pentaho и jasper не работают с кассандрой как оказалось
Presto для SQLзапросов + Superset для визуализации?
DY
Presto для SQLзапросов + Superset для визуализации?
Да как раз нагуглил суперсет. А zeppelin тут не подойдёт?
AS
Да как раз нагуглил суперсет. А zeppelin тут не подойдёт?
там совсем простые графики, тогда уж лучше брать jupyter
DY
Понял спасибо
s
Hello folk's any one having kafka and spark docs plz share thanks in advance
GP
shaikh
Hello folk's any one having kafka and spark docs plz share thanks in advance
λ
Зачем ты гуглишь за него