Мыслитель нашего времени.

cc @AntonTrunov тут появился повод хрюкнуть, если будет желание.

@AntonTrunov я уже

что это за брутальный самец?

на Шурика похож

+

гоготнул

лишь бы не на Буншу

я думаю, тут не про то

Олег разбирается в нечитабельной залупе, прежде чем показывать её народу.

везде эти loop’ы теперь

мета-циклы или мото-циклы?

сделайте кто стикер

+

ло какой фотогигиеничный Олег

гриша говорит про партишонинг, когда спарк, не важно рдд или скл разбивает жирное вычисление на кучу вычислительных джоб, каждую рассылает по воркерам, отслеживает их состояние, и координирует пересылку между воркерами для последующих стадий
а тут говорится про спец механизм именно в скл, который вообще сам по себе колоночно-ориентированный, и фильтры пушдаунятся насколько возможно до хранилища, и в зависимости от типа источника превращаются в фильтры чтения из СУБД или даже ограничения на сами читаемые файлики, чтобы не вычитывать весь датасет целиком, если фильтры его сильно ограничивают

Лучше xml, можно теги на кириллице написать и сразу будет читаемо

жаль, твой панч про мету до старта записи был, немножк без контекста

кто понял, тот понял и т.д.)