Size: a a a

2021 July 06

AZ

Anton Zadorozhniy in Data Engineers
Эт шутка была, Спарк конечно про масштабируемость, я просто Алексея издалека подвожу
источник

V

Vasiliy in Data Engineers
Простите. Я не понял((
источник

I

Ivoya in Data Engineers
Нашел стриминговые версии лин регресии и k-means:
https://spark.apache.org/docs/latest/mllib-linear-methods.html#streaming-linear-regression
Есть ли для других моделей стриминговые версии?
источник
2021 July 07

C

Combot in Data Engineers
kate Regan290 has been banned! Reason: CAS ban.
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
Принес обсудить 😬
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
Alexander надеюсь я правильно пинганул, а можете пояснить, зачем вам надо было облако, если вы не использовали никаких возможностей облаков? И почему выбрали mail.ru cloud, который s3 не s3 и openstack не openstack?
источник

AM

Artur Mustafin in Data Engineers
я работал в Ашан Россия, по поводу выбора облака - это все вкусовщина, есть гораздо более серьезные вопросы по поддержке legacy, как я понимаю, в AWS все, в Google все, а с mail.ru вполне может оказаться, что legacy еще поддерживается
источник

AM

Artur Mustafin in Data Engineers
и вообще, этот выбор делает технический директор с региональным директором по направлению Россия, я с обоими общался, не сомневаюсь что выбор облака был выбран не случайно
источник

AM

Artur Mustafin in Data Engineers
s3 не поддерживает сервера win2008 x86, и еще пару типов серверов, вследствие чего в WICKES так же невозможно поднять CI/CD на AWS
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
прям красота, понятно
источник

AM

Artur Mustafin in Data Engineers
legacy наше все
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
ну я по одной этой картинке вижу, что проблем вагон и при переносе их не исправляли
источник

AM

Artur Mustafin in Data Engineers
да, и в 2013 не было облаков, в картинке
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
Эмм, написано, что это архитектура уже в облаке 🤔
источник

AM

Artur Mustafin in Data Engineers
да, именно, потому что она уже после 2017 была внедрена,когда я ушел, а я не застал вот это все, Data Mark был, Firewall 1 и Firewall 2 я руками настраивал, BI был, Oracle 9i был, а самую первую машину с бекендом для  с реальной машины в VM я перевел сам с помощью CD на grub, ну вроде как я вижу, что Kafka тут есть, норм, все остально тое норм, но вообще, все работало на on-premise + VM на windows server 2008
источник

AM

Artur Mustafin in Data Engineers
а для WS2008 нет VM, так что наверное, мигрировали под .net
источник

AM

Artur Mustafin in Data Engineers
.net core
источник

AM

Artur Mustafin in Data Engineers
при мне backend сидел под .net 3.5 ;) динозариков в ленту
источник