GP
тебе придется поддерживать базу в актуальном состоянии
Size: a a a
2020 July 21
GP
либа на основе этого сделана http://efele.net/maps/tz/us/
AE
чуваки с гитхаба это уже всё за меня делают, я прям готовые аутлайны беру
AE
но за меня их на индексированное покрытие никто не разложит. и не разложил. вот и приходится самому как-то изобретать способ
AE
но эт ещё только самое начало марлезонского балета. потом на полученную сетку ещё надо будет 35 млрд. точек подвесить. просто чтобы проверить пару гипотез. так, пробный проектик для презентации инвесторам.
AE
посчитать пару показателей для 10% американцев. как они, бедняги, ковид переживают в июне en masse
AE
ац ац ац.
а ведь в чём ещё жопа-то... чё я такой, думаю, зачем у меня индексы на границах с перекрытием генерятся? а ведь H3 полифил действительно сосёт. вон чё пишут: Get all hexagons with centers contained in a given polygon.
а покрытие гексами, которые содержатся в аутлайне целиком, у них пока только в RFC для версии 4.
и это, вообще говоря, беда.
а ведь в чём ещё жопа-то... чё я такой, думаю, зачем у меня индексы на границах с перекрытием генерятся? а ведь H3 полифил действительно сосёт. вон чё пишут: Get all hexagons with centers contained in a given polygon.
а покрытие гексами, которые содержатся в аутлайне целиком, у них пока только в RFC для версии 4.
и это, вообще говоря, беда.
AE
вот покуда работаешь с маленькими странами типа британии или финки, где нет внутренних границ, эт не проблема
ПФ
вот покуда работаешь с маленькими странами типа британии или финки, где нет внутренних границ, эт не проблема
думается для маленьких стран легче понимать по стране. Вопрос что делать с фигнёй типа России, Канады, кто там ещё
A
ац ац ац.
а ведь в чём ещё жопа-то... чё я такой, думаю, зачем у меня индексы на границах с перекрытием генерятся? а ведь H3 полифил действительно сосёт. вон чё пишут: Get all hexagons with centers contained in a given polygon.
а покрытие гексами, которые содержатся в аутлайне целиком, у них пока только в RFC для версии 4.
и это, вообще говоря, беда.
а ведь в чём ещё жопа-то... чё я такой, думаю, зачем у меня индексы на границах с перекрытием генерятся? а ведь H3 полифил действительно сосёт. вон чё пишут: Get all hexagons with centers contained in a given polygon.
а покрытие гексами, которые содержатся в аутлайне целиком, у них пока только в RFC для версии 4.
и это, вообще говоря, беда.
Texas, resolution 10, заняло ~5 минут. Такая ли проблема все таки?
A
SS
коллеги, подскажите где в Hive-каталоге хранится информация о бакетах?
в таблице BUCKETING_COLS пусто
в таблице BUCKETING_COLS пусто
M
коллеги, подскажите где в Hive-каталоге хранится информация о бакетах?
в таблице BUCKETING_COLS пусто
в таблице BUCKETING_COLS пусто
А что требуется узнать? Может можно и без задней двери обратиться
SS
нужна именно "задняя дверь"
АЖ
https://subsurfaceconf.com/summer2020/datalake2020
С нашим кейсом по Dremio :)
С нашим кейсом по Dremio :)
SS
https://subsurfaceconf.com/summer2020/datalake2020
С нашим кейсом по Dremio :)
С нашим кейсом по Dremio :)
реально Dremio настолько хорош? он у вас как надстройка над DataLake?
АЖ
реально Dremio настолько хорош? он у вас как надстройка над DataLake?
хорошая балалайка поверх даталейки для бизнес-пользователей
со своими тараканами, естественно
со своими тараканами, естественно
SS
у вас OSS-версия? как рулите инкрементальным рефрешами и чем визуализируете материализации Дремио?
АЖ
у вас OSS-версия? как рулите инкрементальным рефрешами и чем визуализируете материализации Дремио?
у нас EE
инкрементальные рефлекшены норм, вот ретроспективные - больно :)
airflow для пинков метаданных и рефлекшенов, spark для больших таблиц и ретроспективный апдейтов
инкрементальные рефлекшены норм, вот ретроспективные - больно :)
airflow для пинков метаданных и рефлекшенов, spark для больших таблиц и ретроспективный апдейтов
АЖ
визуализация в Табло