@wrar42 кстати, насчет очереди, я правильно понимаю
1. есть ограничение очереди = 10
2. есть 500 стартовых запросов, из них запускается первые 10 и остальные ждут окончания обработки запланированных
3. из каждого запроса выдергивается по ХХХ ссылок и по ним создается запррос, они же становятся сразу следом за "папой"
4. 11-й запрос запланируется в очедь только после того, как сама очередь станет размером <10?
вопросы в пп 2 и 4, дальше еще общий вопрос будет :)