Помогите, Дубли файлов в довландере на гет запросах

seomiks

Client
Регистрация
13.09.2014
Сообщения
369
Благодарностей
124
Баллы
43
Ребята здравствуйте, помогите пожалуйста советом. Сделал довландер файлов на гет запросах. Сылки берет с файла рандомно. Перед тем как взять сылку, стоит рандомная пауза 1-10 сек. При использовании шаба в 30 потоков тянет дубли линков.

Количество потоков на процес - 1

Качаю апк приложения, в оригинале и копиях разный вес файла.

комп:
процесор i5 2 ядра в 2 потока = 4 ядра
8 гб оперативки
 

ZennoScript

Moderator
Регистрация
04.03.2011
Сообщения
4 450
Благодарностей
1 880
Баллы
113
Так берите ссылки из файла с удалением, чтобы дубли не качались. Или в чем вопрос?
 
  • Спасибо
Реакции: seomiks

seomiks

Client
Регистрация
13.09.2014
Сообщения
369
Благодарностей
124
Баллы
43

ZennoScript

Moderator
Регистрация
04.03.2011
Сообщения
4 450
Благодарностей
1 880
Баллы
113

seomiks

Client
Регистрация
13.09.2014
Сообщения
369
Благодарностей
124
Баллы
43
А в файл изменения сохраняете?
Да, я в простых шабах хорошо понимаю, с демки заработал на про, но вот с гет видимо чтото еще недо понимаю))) Буду тестить, прийду к истине)
Вам спасибо.
 

rostonix

Известная личность
Регистрация
23.12.2011
Сообщения
29 067
Благодарностей
5 707
Баллы
113
Без шаблона сложно сказать что не так
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)