Результаты поиска

  1. W

    Ищу исполнителя: универсальный парсер сайтов любого объема

    Написать универсальный рекурсивный парсер (обход каждой страницы) для сайтов любого объема и протестировать на сайте на 10 млн страниц. Требования: - историю и очередь парсинга хранить в БД со статусами страниц, размерами, датами и т.п. - возможность замены UserAgent - парсинг на GET...
  2. W

    Перегенерировать профиль пользователя без потери данных профиля

    Предлагаю проголосовать за функцию: Перегенерировать профиль пользователя (UA / screen size / и остальную добрую сотню параметров). Сохранить старые куки и кеш браузера/ indexdb / local storage / etc , суперкуки , но "обновить" профиль пользователя ( UA / заголовки / железо / движок). В...
  3. W

    Кубик "Ожидание действия пользователя" - красная ветка.

    Кубик "Ожидание действия пользователя" всегда отрабатывает только по зеленой ветки, вне зависимости от того нажал ли пользователь "Продолжить" или нет. Добавить-бы красную ветку, если пользователь не нажал "продолжить" и/или истек таймаут ожидания действий.
  4. W

    Разрывы соединений (проблема мобильных или медленных прокси) - кубик DISCONNECT.

    Добрый день! Мобильные прокси набирают популярность последние годы, и занимают все бОльшую долю рынка. Чаще всего, на них происходит смена IP с ротацией в заданный заранее интервал времени. Такие смены IP, чаще всего, сопровождаются разрывом соединения на 2-10 сек (например, такое наблюдаю у...
  5. W

    Копируются все переменные при копировании кубика "Сохранить Профиль"

    1. Копирую Кубик из проекта в новый проект, с установленной галочкой "Сохранить все переменные". 2. В проект, который копирую кубик, создаются все переменные которые были в старом проекте, автоматически. Удобно в некоторых случаях когда нужно быстро переносить переменные между проектами...
  6. W

    Не чувствительный к регистру поиск по таблице "Содержит Текст"

    Добрый день! Не хватает не чувствительного к регистру поиска по таблице, в частности у меня некоторые логины записаны в исходной таблице как [email protected] , и приходится извращаться по ряду причин (совместимость старых-новых проектов, разделение имен, etc.)
  7. W

    Выгрузить инстанс из памяти в процессе выполнения проекта.

    Добрый день! Подскажите пожалуйста : Запускаю проект с браузером, выполняю некие действия, после чего браузер уже не нужен - только GET/POST запросы с куками. Инстанс браузера продолжает висеть в оперативке и на 40 потоков съедается 9гб оперативки (закрытие вкладки через кубик не помогает)...