AZ
А какие затраты? В людях например
две команды (чтобы покрывать шарик), человек по 12 чтоли было
Size: a a a
2020 October 13
AZ
клиентов немного, меньше сотни
AZ
но правда у нас была закрытая инсталляция, клиентам не давали особо трогать ничего
UD
Бесит что сообщество ( апач ) гоняется за новыми модными блестяшками, а на мердж патчей болт кладут
AZ
Бесит что сообщество ( апач ) гоняется за новыми модными блестяшками, а на мердж патчей болт кладут
эт нормально, все так делают
UD
эт нормально, все так делают
Ну как контрпример, система мейнтейнеров в линуксе
UD
Багфиксы быстро вливаются
UD
Потом бэкпорты в стабильные ядра
AZ
Ну как контрпример, система мейнтейнеров в линуксе
это LSF, у ASF другие стандарты
UD
В хайве тривиальный патч, с таргетом 3+
UD
это LSF, у ASF другие стандарты
Имхо, на все па с semantic versioning можно положить болт, если это решает проблемы сообщества
AZ
Имхо, на все па с semantic versioning можно положить болт, если это решает проблемы сообщества
это решает каждый конкретный проект
UD
это решает каждый конкретный проект
Или условная клаудера =)
AS
За две недели очень поел говна с ним и тезом, баги в джире есть 3+ года, на некоторые дажи патчи есть
а чем закончилась эта история с форком?
UD
а чем закончилась эта история с форком?
Пока ничем, я обложил костылями текущую версию хайва
AZ
я бы сказал что это нормальная история, в большинстве ASF проектов соотношение LOC/Contributors сильно больше чем у линукса или постгри, я бы тоже бежал вперед с таким ограниченным числом ресурсов
AZ
однозначно Hoodie лучше DeltaLake OSS - как минимум из-за Merge-On-Read таблиц и поддержки глобальных индексов в Hbase/Cassandra (связь между первичным ключем данных и каталога партиции/субпартиции/субсубпартиции/бакета)
merge-on-read у айсберга в работе, еще не доступен в релизе (и это сильно сложнее, так как у айсберга подключаемые движки на запись, а не прибито гвоздями к спарку)
R
merge-on-read у айсберга в работе, еще не доступен в релизе (и это сильно сложнее, так как у айсберга подключаемые движки на запись, а не прибито гвоздями к спарку)
Вы частенько поднимаете тему с iceberg. Я правильно понимаю, что это что - то типа orc/parquet next gen, если очень грубо? Может у вас есть success story где - то описанный, было бы интересно почитать)
AZ
Вы частенько поднимаете тему с iceberg. Я правильно понимаю, что это что - то типа orc/parquet next gen, если очень грубо? Может у вас есть success story где - то описанный, было бы интересно почитать)
нет, iceberg/hudi/delta это скорее hive acid done right; orc/parquet это форматы хранения, они продолжают использоваться вместе с iceberg/hudi/delta
AZ
для большого success story with Iceberg еще рано (может быть у китайских товарищей), а мне врядли разрешат рассказать о моих проектах