В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

PiterPy Meetup

655 membersпожаловаться на группу
2020 October 10

DB

Dima Boger in PiterPy Meetup
Нашёл как делает Sentry — они просто вырезают по регулярке числа, хексы, айпишники и т.д. и заменяют их на темплейт-значение (<int>, <float>, ...):
https://github.com/getsentry/sentry/blob/19b5b3e295961e4db9d1efe3f48e7d2f78e4a4a3/src/sentry/grouping/strategies/message.py
GitHub
getsentry/sentry
Sentry is cross-platform application monitoring, with a focus on error reporting. - getsentry/sentry
источник
18:50пожаловаться#1

DB

Dima Boger in PiterPy Meetup
Как хорошо что сентри на питоне 🙏
источник
18:50пожаловаться#2

AZ

Andrey Zakharevich in PiterPy Meetup
Dima Boger
А кто-нибудь решал проблему обратную темплейтингу? Т.е. есть набор строк, и нужно понять из какого темплейта они появились? Аля
Retry in 5 seconds, Retry in 10 seconds -> Retry in %d seconds
в общем случае это очень сложная задача. по сути тебе надо угадывать, какие части входа могут различаться, а какие нет
источник
18:51пожаловаться#3

DB

Dima Boger in PiterPy Meetup
Ну у меня есть какое-то количество входных строк каждого типа, 2-10 штук.

Замена чисел и айпишников на темплейт-строки не сработает в более сложных кейсах, где будет изменяться только одно слово например 🤷‍♂️ Но у меня пока таких кейсов вроде нет 🤔
источник
18:53пожаловаться#4

AZ

Andrey Zakharevich in PiterPy Meetup
ну ты можешь разбить все входы на слова и последовательно по ним идти, смотреть где что различается, и каким шаблоном можно это заменить. каждый шаблон надо будет писать руками, и очень много боли будет если входы будут разной длины
источник
18:55пожаловаться#5

DB

Dima Boger in PiterPy Meetup
Не, руками 100% не хочется
источник
18:55пожаловаться#6

AZ

Andrey Zakharevich in PiterPy Meetup
ну в смысле хотя бы на базовом уровне, что вот такие шаблоны поддерживаются, и вот в таком случае их можно применять
источник
18:56пожаловаться#7

AZ

Andrey Zakharevich in PiterPy Meetup
а, еще вопрос, какая тебе вычислительная сложность нужна
источник
18:56пожаловаться#8

DB

Dima Boger in PiterPy Meetup
🤷‍♂️
источник
18:57пожаловаться#9

AZ

Andrey Zakharevich in PiterPy Meetup
если времени много, а строки не очень длинные, то можно перебором добавлять по одному слову/шаблону к темплейту и смотреть, матчит ли оно префикс всех входов
источник
18:58пожаловаться#10

AZ

Andrey Zakharevich in PiterPy Meetup
хотя я вообще не уверен есть ли там решение быстрее. разве что можно сэкономить и пытаться на каждом шаге определять тип следующего слова и не перебирать вообще все варианты
источник
19:01пожаловаться#11

AZ

Andrey Zakharevich in PiterPy Meetup
ну и как-то надо предпочитать наиболее конкретный шаблон, а то .* для всего подойдет
источник
19:02пожаловаться#12
2020 October 11

ED

Eugene Denisov in PiterPy Meetup
Dima Boger
А кто-нибудь решал проблему обратную темплейтингу? Т.е. есть набор строк, и нужно понять из какого темплейта они появились? Аля
Retry in 5 seconds, Retry in 10 seconds -> Retry in %d seconds
Расстояние Левенштейна с пороговым значением?
источник
12:27пожаловаться#13

DB

Dima Boger in PiterPy Meetup
Eugene Denisov
Расстояние Левенштейна с пороговым значением?
С числами работает более простой метод с заменой чисел на темплейт-плейсхолдеры. А расстояние левенштейна наверное сломается на чем-нибудь типа Field 'id' expected a number but got 'a very long string'.
источник
12:28пожаловаться#14

ED

Eugene Denisov in PiterPy Meetup
Так обучить на имеющихся данных. Если скрипт вытащит темплэйт из более-менее похожих сообщений, дальше уже имея набор темплэйтов, можно рассортировать всё.
источник
12:30пожаловаться#15

DB

Dima Boger in PiterPy Meetup
Eugene Denisov
Так обучить на имеющихся данных. Если скрипт вытащит темплэйт из более-менее похожих сообщений, дальше уже имея набор темплэйтов, можно рассортировать всё.
Верно
источник
12:32пожаловаться#16
2020 October 12

AS

Anton Stavinsky in PiterPy Meetup
Ребят у нас кто-то из этого чата тягает людей в какую-то группу jumpin spb. Видимо знакомства какие-то. Как бы его вычислить и забанить(

100% из этой группы так как у меня с коллегой только один общий чат и это он. и оба попали в ту группу.
источник
16:55пожаловаться#17

SS

Sergey Sokolov in PiterPy Meetup
Anton Stavinsky
Ребят у нас кто-то из этого чата тягает людей в какую-то группу jumpin spb. Видимо знакомства какие-то. Как бы его вычислить и забанить(

100% из этой группы так как у меня с коллегой только один общий чат и это он. и оба попали в ту группу.
sticker.webp
(4.73 Кб)
источник
16:58пожаловаться#18

PR

Paul Rudnitskiy in PiterPy Meetup
Anton Stavinsky
Ребят у нас кто-то из этого чата тягает людей в какую-то группу jumpin spb. Видимо знакомства какие-то. Как бы его вычислить и забанить(

100% из этой группы так как у меня с коллегой только один общий чат и это он. и оба попали в ту группу.
думаешь — есть смысл проводить сложное расследование и поиск? Мне кажется, проще каждому, кого втянули в новую группу - жаловаться на спам и выходить сразу. Группу довольно оперативно закроют
источник
17:00пожаловаться#19

DB

Dima Boger in PiterPy Meetup
Единственный действенный способ борьбы: mark as spam and leave кнопка, которая появляется при добавлении
источник
17:00пожаловаться#20