сегодня - завтра попробую напишу тогда) у меня где-то просто пул уже написан был на нем, откачу посмотрю.

А каким боком можно вернуть открытый сокет от socks5 и позже уже закинуть через него реквест ?

Клиент новый появился Finch, похоже через него что-то можно сделать такое

checkout pool можешь сделать. есть NimblePool для этого

Спасибо, вот Finch как раз Mint + NimblePool

Ну да, а socks5 разве http-совместимый?
Вроде нет

Да

Может я вопрос не понял

Ну ты вроде не можешь использовать http-клиент для создания socks5-соединения

Через Gun можно

Finch хз

Но в Mint его не было вроде

Это как?

{Tesla.Adapter.Gun, proxy: {:http, 'proxy_address', port}, timeout: 14_500}

{Tesla.Adapter.Gun, proxy: {:socks5, 'proxy_address', port}, timeout: 14_500}

Какой-то такой же ситаксис если без Теслы

А, ну тут каждое соединение имеет свой туннель. Можешь использовать HTTPoison, там уже готовый пулл процессов, не придётся самому ничего делать

Вообщем тут не в пуле дело. У меня каждый запрос идет в отдельном процессе через Broadway, там concurency стоит и rate limit, пул по сути нафиг не нужен получается. Я сейчас прикрутил на всякий случай от Finch пул нифига не поменялось.

Если прокси запускаю из операционки и запускаю кравлера то получается где-то 10-14 кравлов в секунду, при желании можно и больше выжать. Но соответственно он айпишник не меняет под каждый запрос.

Но когда ставлю коннект к прокси через какой-нибудь там Эликсировский клиент то выживаемся 1 кравл в секунду в лучшем случае. Вот хз почему так режится.