Телеграмм чат группы mlbootcamp страница 14482

я вот думаю как технически такие вещи должны проверяться (автоматически)

по-хорошему новые данные
вашим методом можно просто старые данные пошафлить, вангую что это 99% COPY убьет

20:18пожаловаться #1

Миша

Интересно, а вдруг у кого-то модель примерно такая:

class MyModel:
    def __init__(self):
        self.result = [...]
    def predict(self, *_):
        return self.result

вот-вот, я судорожно вспоминаю, не было ли там оставлено COPY ) но в любом случае затирается

20:18пожаловаться #2

Вячеслав Колосков

а кто нибудь переведите с докерского что тут написано :)

непереводимая игра слов

20:18пожаловаться #3

поэтому да, любые новые данные - отличная проверка

20:18пожаловаться #4

Миша in ML Boot Camp Official

Внешне-то будет и joblib.load и model.predict

20:18пожаловаться #5

или старые с шафлом хотя бы. или их подмножество

Дима Васькин... in ML Boot Camp Official

20:18пожаловаться #6

ДВ

я вот думаю как технически такие вещи должны проверяться (автоматически)

Проскорить, поменяв порядок строк мб?

20:19пожаловаться #7

Дима Васькин

Проскорить, поменяв порядок строк мб?

угу, айдишники

Oleg Cheremisin in ML Boot Camp Official

20:19пожаловаться #8

не давать тест на руки (я думал, контейнерные соревы для этого и делаются)

20:19пожаловаться #9

Sergei Fironov

или старые с шафлом хотя бы. или их подмножество

ну если кто-то написал модель

def predict(data):
    return [predicts[x['id']] for x in data]

то не спасет
но думаю таких моделей не очень много
хотя может быть и есть

20:19пожаловаться #10

Oleg Cheremisin

не давать тест на руки (я думал, контейнерные соревы для этого и делаются)

делаются, в этот раз дали так

20:19пожаловаться #11

Oleg Cheremisin

не давать тест на руки (я думал, контейнерные соревы для этого и делаются)

ну это изначально надо было делать

20:19пожаловаться #12

делаются, в этот раз дали так

а у вас на самом деле другие данные есть?

20:20пожаловаться #13

Mikhail Dektyarev

а у вас на самом деле другие данные есть?

придется делать

20:20пожаловаться #14

сделаю, залью

20:20пожаловаться #15

Миша in ML Boot Camp Official

Sergei Fironov

или старые с шафлом хотя бы. или их подмножество

Старые с шафлом всё-таки тоже можно было предугадать и обмануть
Какой-нибудь

result_dict[text]

20:20пожаловаться #16

Миша in ML Boot Camp Official

Mikhail Dektyarev

ну если кто-то написал модель

def predict(data):
    return [predicts[x['id']] for x in data]

то не спасет
но думаю таких моделей не очень много
хотя может быть и есть

Чёрт, как же я долго пишу))

20:20пожаловаться #17

придется делать

ну я вангую что почти все COPY убьются шафлом (не убьются только злонамеренные), и он (наверное) дешевый

20:21пожаловаться #18

Mikhail Dektyarev

ну я вангую что почти все COPY убьются шафлом (не убьются только злонамеренные), и он (наверное) дешевый

и это сделаю

Oleg Cheremisin in ML Boot Camp Official

20:21пожаловаться #19

Миша

Старые с шафлом всё-таки тоже можно было предугадать и обмануть
Какой-нибудь

result_dict[text]

написать проверку теста на руках с поданным и проверять построчно