Телеграмм чат группы scala

не понятно

22:45пожаловаться #1

Я заменил Iterable#map на mutable.HashMap.put и получил двухкратный прирост производительности на говнокоде, считающем кпи

22:45пожаловаться #2

Обидно

22:45пожаловаться #3

странный оверхед какой-то

22:46пожаловаться #4

Распаралель

22:47пожаловаться #5

Распараллель себе пальцы

22:47пожаловаться #6

toMap ?

22:47пожаловаться #7

Это невозможно

22:47пожаловаться #8

Тогда помолчи

22:48пожаловаться #9

Ну он же делает кауой то map и он у него 8 минут занимает , можно разделить одну коллекцию на несколько и преобразовать в параллели

22:48пожаловаться #10

Можно ещё коллекцию спарком посчитать распределенно , будет минуту считать или 30 секунд

22:49пожаловаться #11

.toMap не занимает 8 минут

22:49пожаловаться #12

Но убирание .toMap из пайплайна ускоряет процесс, занимающий восемь минут, в два раза

22:50пожаловаться #13

Говно какое-то эти скалаколлекции

22:50пожаловаться #14

он ток загружать будет 30 минут)

22:50пожаловаться #15

а дубликатов много?

22:50пожаловаться #16

Зачем мне твой говноспарк, если я свой говноспарк пишу

22:50пожаловаться #17

Посмотри кстати , на 2.12 , там может и по другому быть

22:50пожаловаться #18

Grigory Pomadchin in Scala User Group

лул, а ясно что медленно?

22:51пожаловаться #19

Grigory Pomadchin in Scala User Group

или ты забил и просто заменил на мапу мутабельную?