Нужен фильтр источников

[bloodyc]

Требуется добавить вилку количества прокси в источнике, для обработки или перед добавлением его в список источников. или какойто черный список по количеству прокси

например от 10 до 20000 прокси в источнике

Пользуюсь давно, наблюдения показывают что бывают в источниках больше 100000 прокси, из которых рабочих 1-10, но из-за этого время проверки сильно увеличивается
Также очень много источников где мало прокси, пусть даже рабочих, время перебора всех маленьких источников отбирает у других хороших
Так же нагрузка на сервер растет при большом количестве источников... > 1000
Пусть в ущерб нескольким рабочим, но скорость обработки будет выше

Пока приходиться чистить список источников раз в несколько дней вручную

 

[bloodyc]

Немного решил проблему, что бы не чистить повторно.

Выделяю все источники без живых прокси, нажимаю кнопку "проверить прокси".
те, в которых так и не появились живые. через контекстное меню, выбираю выключить.
и переношу в другую, отдельную группу. Назвал Black list.
повторно они уже не добавятся, и не засоряют своим мусором базу.

Насчет Встроенного "черного списка" - использую немного по другому, поэтому не хочу смешивать