A
5-10 патчей без проблем ребейзятся/мержутся при выходе новой версии и собирается что тебе нужно
Size: a a a
2021 March 30
A
а вот если полноценный форк, то там да, проблем с мержами может быть много
AE
ну у третьей ветки я не смотрел код, если что. может попроще стало, но во втором зоопарк такой, что страшно соваться
AZ
Я делал кастомный датасорс на мастере до релиза тройки, ну день в пару недель тратишь на мерджи, жить можно
AE
это если уже знаешь где %)
а если с нуля решишься полезть, не поседеешь?
а если с нуля решишься полезть, не поседеешь?
A
джависту в кодовой базе спарка норм, код достаточно адекватный
AZ
Ну это же не кампанейщина, ты поддерживаешь его какое-то время, или проектом или просто как работа
AE
джависту в кодовой базе спарка норм, код достаточно адекватный
у самого спрка да, более менее. я про зависимости
AZ
Не думаю что кому-то стоит заходить туда ради одного патча, свой форк это большое решение
K
Я делал кастомный датасорс на мастере до релиза тройки, ну день в пару недель тратишь на мерджи, жить можно
кастомный датасорс можно в проекте положить
A
смотря какой это патч, иногда проще сразу в коде поправить дефолт значения
особенно если они не подразумевают конфигурируемости =\
особенно если они не подразумевают конфигурируемости =\
AE
мне вот лично буквально на той неделе потребовался джексон на одну минорку новее, чем в комплекте ванилы 3.0.
в фатджаре реплейснул, вроде всё работает. но гуаву или коммонсы так манкипатчить страшно.
в фатджаре реплейснул, вроде всё работает. но гуаву или коммонсы так манкипатчить страшно.
AE
в 2.4 оно шадовилось в org.spark_project
AZ
кастомный датасорс можно в проекте положить
там была идея в паре оптимизаций которые требовали измения датасорсв2 спеки в самом спарке
A
мне вот лично буквально на той неделе потребовался джексон на одну минорку новее, чем в комплекте ванилы 3.0.
в фатджаре реплейснул, вроде всё работает. но гуаву или коммонсы так манкипатчить страшно.
в фатджаре реплейснул, вроде всё работает. но гуаву или коммонсы так манкипатчить страшно.
гуаву не получится, она там в момент сборки jar шейдится
так что как вариант только ручками классы переименовывать
так что как вариант только ручками классы переименовывать
AE
гуаву не получится, она там в момент сборки jar шейдится
так что как вариант только ручками классы переименовывать
так что как вариант только ручками классы переименовывать
угу. вот я тоже думал сфоркать спарк, потом посмотрел, и понял что в одно лицо я это не потяну. пришлось сторонние либы корёжить, там меньше работы
ЕГ
Я с одним несложным патчем, включающим пайспарк виртуалэнв, гемора словил достаточно)
ЕГ
А ведь он встроен в хдп)
A
их кастомными патчами 😉
A
apache
cloudera
hortonworks
intel-adaptive
в своё время были git remote когда в спарке ковырялся
cloudera
hortonworks
intel-adaptive
в своё время были git remote когда в спарке ковырялся