База прокси

rostonix

Известная личность
Регистрация
23.12.2011
Сообщения
29 067
Благодарностей
5 703
Баллы
113
Предлагаю чтобы была возможность/опция отключать коллекционирование прокси в базу данных Зенно. У меня около 5 постоянно обновляющихся источника и спустя 24 часа в Зенно уже база в 25000 прокси. А я так понимаю что он гоняет по кругу и свою базу тоже? Иначе зачем ему их копить и не удалять? А там уже куча мертвых

В идеале я бы хотел чтобы в базе зенно присутствовали только спарсенные последним проходом прокси. Если их уже нет в источниках - не должно быть и в базе.
 

AlexZI

Client
Регистрация
02.05.2014
Сообщения
37
Благодарностей
3
Баллы
8
1300 источников и за 500к проксей. Это нормально? Наверное надо было начинать с вики для чекера...
 

alekwuy

Client
Регистрация
06.04.2013
Сообщения
1 631
Благодарностей
461
Баллы
83
Скорее нужно сделать галочку "удалять прокси из базы если его нет в источнике"
 

rostonix

Известная личность
Регистрация
23.12.2011
Сообщения
29 067
Благодарностей
5 703
Баллы
113
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)