Приветствую, всех форумчан! Поздравляю с наступающими праздниками и желаю в Новом году минимум Х2 к профиту!
Подскажите пожалуйста такой вопрос, есть сайт и написан парсер на ГЕТ-запросах
Есть уже собранный список юзеров, цель собрать их данные из профилей в многопотоке - в рамках одной сессии все работает хорошо.
На сайте нужна авторизация, написать ее на запросах также не будет проблемой, но я так понимаю, что при каждом следующем выполнении шаблон будет авторизироваться каждый раз снова и снова.
А это как бы не есть хорошо, как можно реализовать это в многопотоке, чтобы каждый поток авторизировался всего один раз и выполнял сбор беря строку из списка пока собственно юзеры в нем не закончатся.
Пробовать лишний раз что-то боюсь поскольку сайт очень капризный регистрацию на нем одобряют админы вручную в течение суток и не всегда с первого раза, а бан на раз два можно отхватить.
Либо можно просто начать сессию, взять куки и прописать их в запросе и тогда авторизация не будет нужна?
Скорее всего ответ очевиден, но что-то не могу сам додумать.
Буду очень признателен за помощь!
Подскажите пожалуйста такой вопрос, есть сайт и написан парсер на ГЕТ-запросах
Есть уже собранный список юзеров, цель собрать их данные из профилей в многопотоке - в рамках одной сессии все работает хорошо.
На сайте нужна авторизация, написать ее на запросах также не будет проблемой, но я так понимаю, что при каждом следующем выполнении шаблон будет авторизироваться каждый раз снова и снова.
А это как бы не есть хорошо, как можно реализовать это в многопотоке, чтобы каждый поток авторизировался всего один раз и выполнял сбор беря строку из списка пока собственно юзеры в нем не закончатся.
Пробовать лишний раз что-то боюсь поскольку сайт очень капризный регистрацию на нем одобряют админы вручную в течение суток и не всегда с первого раза, а бан на раз два можно отхватить.
Либо можно просто начать сессию, взять куки и прописать их в запросе и тогда авторизация не будет нужна?
Скорее всего ответ очевиден, но что-то не могу сам додумать.
Буду очень признателен за помощь!
