Size: a a a

DevOps — русскоговорящее сообщество

2021 January 10

C

Crysalis in DevOps — русскоговорящее сообщество
Margarita
Нет никакого продукта, узбагойтесь)проксями, ботами и прочим не барыжу
тогда скукота и неретабельно :(
источник

I

III in DevOps — русскоговорящее сообщество
Crysalis
тогда скукота и неретабельно :(
А что тебе рентабельно?
источник

M

Margarita in DevOps — русскоговорящее сообщество
Endruew
ой да часто вы запросы делаете, конечно тут сложно вам
Вообще ни разу не нагрузка. Написала выше, что можно производительность точно поднять, как минимум на порядок (если про инсту говорить)
источник

C

Crysalis in DevOps — русскоговорящее сообщество
III
А что тебе рентабельно?
чтоб мне ещё платили когда я их адреса юзаю
чо как маленький
источник

I

III in DevOps — русскоговорящее сообщество
Crysalis
чтоб мне ещё платили когда я их адреса юзаю
чо как маленький
Без бэ, плагинчик от нас поставь у себя.
источник

E

Endruew in DevOps — русскоговорящее сообщество
Margarita
Вообще ни разу не нагрузка. Написала выше, что можно производительность точно поднять, как минимум на порядок (если про инсту говорить)
а можете рассказать подробней? у нас была такая проблема - не смогли решить никак, не знаю решили или нет,
больше там не работаю - но интерес о том как решается проблема осталась.
источник

C

Crysalis in DevOps — русскоговорящее сообщество
III
Без бэ, плагинчик от нас поставь у себя.
а мне за плагинчик доплачивать будут?)
источник

I

III in DevOps — русскоговорящее сообщество
Да
источник

C

Crysalis in DevOps — русскоговорящее сообщество
III
Да
збс, тыщу баксов в месяц надеюсь или вы на лохах окупаетесь? :D
источник

I

III in DevOps — русскоговорящее сообщество
Crysalis
збс, тыщу баксов в месяц надеюсь или вы на лохах окупаетесь? :D
Ланчмани, мы тебе потом всё залочим и будешь битки слать.
источник

C

Crysalis in DevOps — русскоговорящее сообщество
вапросов больше не имею) пойду лучше еду поем и кино погляжу)
источник

I

III in DevOps — русскоговорящее сообщество
Три ночи, а он есть пошёл
источник

M

Margarita in DevOps — русскоговорящее сообщество
Endruew
а можете рассказать подробней? у нас была такая проблема - не смогли решить никак, не знаю решили или нет,
больше там не работаю - но интерес о том как решается проблема осталась.
Почитай мое сообщение выше, где я про микс проксей писала.
Мы использовали веб апи. И за каждым ботом было закреплено не более 5 проксей из 1 подсети.
Если нужно подробнее , заходи в ЛС завтра )
источник

I

III in DevOps — русскоговорящее сообщество
Девопсы...
источник

C

Crysalis in DevOps — русскоговорящее сообщество
III
Ланчмани, мы тебе потом всё залочим и будешь битки слать.
нунаконец-то я комп потру и чистенькие буду!
источник

C

Crysalis in DevOps — русскоговорящее сообщество
III
Три ночи, а он есть пошёл
это у тебя
источник

M

Margarita in DevOps — русскоговорящее сообщество
Margarita
Привет! Пробовал astroproxy? У них довольно гибкая тарифная сетка, можно набрать в армию часть резидентных, часть корпоративных , часть мобильных проксей, плюс ротацию включить. Работают относительно стабильно. Впрочем, люминати тоже ок.

В свое время для парсинга как раз инсты набрали порядка 2к проксей от разных провайдеров. В том числе были и оч дешёвые.
Пиковая нагрузка примерно 600 асинхронных запросов от 1 парсера ( их было несколько). Работало сутками, часов через 5- 6 начинались  баны. Инст банит сразу подсетки, поэтому старались не брать провайдеров которые дают прокси в одной подсети.

В общей сложности было порядка 30-40% зафакапленных запросов за один запуск. Это предел, дальше улучшить не смогли на тот момент, пока я была в проекте, но тюнили это дело довольно долго.
Endruew.  Вот это
источник

I

III in DevOps — русскоговорящее сообщество
Crysalis
это у тебя
США?
источник

I

III in DevOps — русскоговорящее сообщество
Тай?
источник

I

III in DevOps — русскоговорящее сообщество
Мурманск?
источник