Проверка и выгрузка по фильтру

Max

Client
Регистрация
17.06.2012
Сообщения
168
Благодарностей
44
Баллы
28
Сделайте возможность делать выгрузки проксей из базы по фильтру. Общая суть делаем фильтр(значения фильтра можно из правила взять или вообще правило юзать) - выгружаем или проверяем из базы только те прокси которые соответствуют правилу (не с живого списка).
Просто глупо чекать всю базу если нужны только русские прокси например. Те я думаю, что в базе должны оставаться значения фильтров хоть и старые. просто проводим перечек уже чеканной базы по правилу.
 
Последнее редактирование:

rostonix

Известная личность
Регистрация
23.12.2011
Сообщения
29 067
Благодарностей
5 703
Баллы
113
Не понимаю.
Фильтр применяется еще до попадания прокси в базу.
При этом от правил он никак не зависит
 

Max

Client
Регистрация
17.06.2012
Сообщения
168
Благодарностей
44
Баллы
28
Фильтр применяется к базе уже прочеканных проксей. Просто когда идет чек базы вся доступная информация сохраняется. Например страна, тип и тд. Чтобы в дальнейшем можно было быстро все это дело фильтрануть и чекать (чтобы страну определить запросы не нужны, достаточно IP).
Смысл не в том, когда он применяется. Смысл в том, что не перечекивать миллионы проксей, которые изначально не нужны (например страны и тд). Мы тупо делаем выборку и с ней уже работаем.
Пример база 10 000 - .... Ее перечекать нужно 30000+ тысяч запросов (если чекать еще на типы, без учета доп запросов). А зачем? Можно просто изначально настроить фильтр и все (фильтр не для живого списка, а для базы).
ЭТО ФИЛЬТРЫ НЕ ДЛЯ СБОРА И НЕ ПРАВИЛО ДЛЯ ВЫДАЧИ. Это правильно которое перед проверкой фильтрует базу прокси (хорошо бы туда еще добавить фильтр по дате последнего чека, чтобы можно было фильтрануть недавно чеканные).

Еще замутить умный поиск по типу искать диапазоны... Чето вроде этого. Те при поиске и валидности диапазона, ищется приближенный диапазон и чекается.
 
Последнее редактирование:

rostonix

Известная личность
Регистрация
23.12.2011
Сообщения
29 067
Благодарностей
5 703
Баллы
113
Отправлю ссылку на топик автору проксичекера.
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)