Покупаю открытые прокси. Чекаю прокси на работу с нужным мне ресурсом и замеряю скорость через стандартные методы ProxyChecker.
Далее каждые 5 минут чекаю всю собранную базу прокси на "живучесть". Но мне нужны только прокси, которые отвечают условию: работают на моем ресурсе, быстрые. Это всего 30-50 прокси вместо нескольких сотен ненужных мне.
Чекер забивает сеть бесполезной работой.
Соответственно хотелось бы увидеть в ProxyChecker функциональность:
1) Прокси с медленной работой удаляются из базы (или недопускаются в базу)
2) Прокси не соответсвующие критерию работоспособности с ресурсом также не добавляются в базу
Последнюю проблему решил через костыль. Программа каждые 5 минут собирает и удаляет прокси удовлетворяющие условию Запретить URL (допустим это Facebook).
Далее каждые 5 минут чекаю всю собранную базу прокси на "живучесть". Но мне нужны только прокси, которые отвечают условию: работают на моем ресурсе, быстрые. Это всего 30-50 прокси вместо нескольких сотен ненужных мне.
Чекер забивает сеть бесполезной работой.
Соответственно хотелось бы увидеть в ProxyChecker функциональность:
1) Прокси с медленной работой удаляются из базы (или недопускаются в базу)
2) Прокси не соответсвующие критерию работоспособности с ресурсом также не добавляются в базу
Последнюю проблему решил через костыль. Программа каждые 5 минут собирает и удаляет прокси удовлетворяющие условию Запретить URL (допустим это Facebook).