В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

2397 membersпожаловаться на группу
2021 April 22

EK

Evgenii Kuznetcov in Data Engineers
Я говорю про нашу имплементацию и наши задачи. На каждый seek - запрос к s3
источник
17:38пожаловаться#1

AE

Alexey Evdokimov in Data Engineers
это жесть и безобразие
источник
17:40пожаловаться#2

AE

Alexey Evdokimov in Data Engineers
а как сделать без оверхеда вообще не понятно. либо дохрена IO либо жрать память как  не в себя
источник
17:41пожаловаться#3

EK

Evgenii Kuznetcov in Data Engineers
aka дата инжиниринг
источник
17:41пожаловаться#4

AE

Alexey Evdokimov in Data Engineers
нет, это отсутствие инжиниринга. это лютый ad hoc-ing и говнокод
источник
17:42пожаловаться#5

P

Pavel in Data Engineers
K8S кто умеет?
источник
17:44пожаловаться#6

OI

Oleg Ilinsky in Data Engineers
смотря что
kubectl apply -f умею
источник
17:45пожаловаться#7

OI

Oleg Ilinsky in Data Engineers
в случае особо прилива сил и мотивации могу даже helm upgrade
источник
17:45пожаловаться#8

P

Pavel in Data Engineers
у кого-то бывает, что куб нахер срёт на activeDeadlineSeconds, выставленный для джобов?
источник
17:45пожаловаться#9

P

Pavel in Data Engineers
или сложна?
источник
17:46пожаловаться#10

OI

Oleg Ilinsky in Data Engineers
сложна) и так спарк в кубах на костылях работает, а тут ещё какие-то дедлайны
источник
17:46пожаловаться#11

P

Pavel in Data Engineers
спарк в кубе, кстати, на удивление неплохо завелся)
источник
17:47пожаловаться#12

OI

Oleg Ilinsky in Data Engineers
ну стримы у меня чота не сразу заработали, пришлось попотеть
источник
17:48пожаловаться#13

P

Pavel in Data Engineers
а ёп... стримы. стримы отлично заводятся на флинке
источник
17:48пожаловаться#14

P

Pavel in Data Engineers
в кубе
источник
17:48пожаловаться#15

AE

Alexey Evdokimov in Data Engineers
ладно, чёт реально бомбануло у меня с паркетов в левом s3. сорри. не та задача, на которую хотелось тратить время...

из интересных и хороших новостей: MS сделали нативные X/Wayland под виндой
источник
18:38пожаловаться#16

AE

Alexey Evdokimov in Data Engineers
https://devblogs.microsoft.com/commandline/the-initial-preview-of-gui-app-support-is-now-available-for-the-windows-subsystem-for-linux-2/
Windows Command Line
The Initial Preview of GUI app support is now available for the Windows Subsystem for Linux | Windows Command Line
A year ago at BUILD 2020 we introduced our goal to bring Linux GUI applications to the Windows Subsystem for Linux (WSL) to run Linux GUI applications. We are proud to announce the first preview of this highly anticipated and open source feature!
источник
18:38пожаловаться#17

AE

Alexey Evdokimov in Data Engineers
теперь джетбрейнсу можно не пилить поддержку WSL под винды, а просто юзать линуховую сборку
источник
18:39пожаловаться#18

AE

Alexey Evdokimov in Data Engineers
что выглядит гораздо проще и удобнее
источник
18:40пожаловаться#19

AZ

Anton Zadorozhniy in Data Engineers
Не бывает, мб баг или вы неправильно его понимаете
источник
18:41пожаловаться#20