AG
Странно, у группы тоже уведомления отключены но пуши пришли 🤔
Size: a a a
2020 September 08
С
Странно, у группы тоже уведомления отключены но пуши пришли 🤔
+
R
Всем привет, а как побороть в пайспарке что такая запись df.write.saveAsTable() пишет с правами 755, а не 777?
DZ
а с чего там должно быть 777?
R
если писать через spark.sql() то будет 777
DZ
зачем вообще 777?
R
ну мне кажется странным что если я создаю таблицу из под личной учетки, что потом не могу переписать девовской
R
да и в целом странно то что разные апи по разному пишут
DZ
да и в целом странно то что разные апи по разному пишут
это факт. но 777 это плохие права
DZ
ну мне кажется странным что если я создаю таблицу из под личной учетки, что потом не могу переписать девовской
ну назначайте группы для этого
R
у девовской на уровне хайва все права есть, но проблема возникает на уровне hdfs
DZ
S
Всем привет, а как побороть в пайспарке что такая запись df.write.saveAsTable() пишет с правами 755, а не 777?
дефолтный umask в хдфс конфиге
S
022
N
Я пишу ТФ только очень ограниченому количеству причин: запуск на энд оф зе ворлд, композиция, диай, возможность подружить другой эффект в какой-нибудь трансформации,
А можно для деревенских, за что спорили давеча почтенные эксперты? ТФ-это же, судя по всему, не TensorFlow?
DZ
Tagless Final
DZ
способ энкодинга
AZ
А у кого Spark джобы на EKS Fargate, какие у вас средние величины запуска экзекьюторов?
AZ
И не просело ли последние две недели?
AE
а математики тут есть? с образованием по мат.статистике или чё-нить типа того?