Умный парсер телефонов с OLX на запросах

Apukhov

Client
Регистрация
20.10.2018
Сообщения
16
Благодарностей
8
Баллы
3
Ну, что.. Как всегда, всякие неприятности случаются в самый неподходящий момент.
Сегодня настал тот день, когда OLX обновился так, что задело и мой парсер. На данный момент работают абсолютно все его функции кроме самой главной, а именно, запроса номера телефона. (Танцуют те, кто брал парсер не для этой цели:bp: а их было, как минимум пятеро на моей памяти)

Что же произошло?
Решение сегодня уже фактически найдено, но на тестирование, внедрение и опять тестирование уйдет достаточно много времени.
По сути, добавился еще один токен в заголовках, но очень своенравный, который не так уж и просто заполучить, а получать его надо будет для каждого телефона..
Раньше мы пользовались лишь одним токеном и паршивыми проксями. Но сегодня это уже набор из десятка важных параметров и цена получения номера теперь не один запрос, а 5.
В связи с этим парсер должен быть перекроен и основательно изменен внутри.
Напрашивалась новая логика работы с аккаунтами, которая теперь должна быть тщательно продумана и, все-таки, осуществлена, иначе просто никак.
К тому же, хочется вернуть заявленные скорости, которые они нам постепенно поджимали весь год. Очень постараюсь.

Когда ждать?

По сути, это будет новый продукт в старой оболочке.
Все вышеперечисленные работы затянутся минимум на несколько недель.:dy:

Когда они вынудили нас использовать аккаунты для парсинга и выставили на них лимиты тоже ждали около 2-х месяцев, помните? С тех пор подавляющее большинство парсеров-конкурентов не завелись.
А наш был, есть и будет лучшим парсером OLX еще на долгое время.

Прошу всех запастись терпением и следить за новостями в этой теме.
Ждем!
 

Alexmd

Client
Регистрация
10.12.2018
Сообщения
1 021
Благодарностей
1 385
Баллы
113
Работа парсера восстановлена. Обновление всем клиентам пришло автоматически и бесплатно, как всегда.
С аккаунтами и их корректной обработкой еще немного поиграемся, но уже в бою, исходя из ваших замечаний.

Цена для новых клиентов именилась в большую сторону. Актуальная цена, как и контакты для покупки и других вопросов, в стартпосте.
 
  • Спасибо
Реакции: roma19058 и Apukhov

Leg

Client
Регистрация
20.09.2021
Сообщения
3
Благодарностей
4
Баллы
3
Лучший продавец, давно взял данный шаблон, каждый раз все исправляет при изменении на сайте, очень быстрая обратная связь и терпеливый! Спасибо огромное, больше таких ответственных и порядочных людей!
 
  • Спасибо
Реакции: roma19058 и Alexmd

7selem

Новичок
Регистрация
11.04.2023
Сообщения
1
Благодарностей
1
Баллы
3
Не часто пишу отзывы, особенно по собственному желанию. Александр создал "хайенд" модель парсера для олкс. Всё, что мне нужно было от парсера для анализа рынка olx (соотношение топ и обычных обьявлений), спроса (парсер собирает и просмотры) по конкретным товарам - все есть. Что б ы не оказались в то же ситуации, что и я - анализ полученных данных вам придетя делать самим, Александр этим не занимается. Найти хорошего ексель специалиста, который вам пропишет нужные форму - дело 2-3х дней работы. Вся доступная (а иногда и не очень доступная) информация считывается с помоью этого замечатеьного парсера. Работает на отлично, обновляется в случае, если олкс снова придумает какие-то уловки. Рекомендую!
 
  • Спасибо
Реакции: Alexmd

Dictum

Новичок
Регистрация
21.08.2023
Сообщения
1
Благодарностей
0
Баллы
1
Оставлю отзыв о работе с автором.
Рекомендую однозначно, заказы выполняет в срок, если столкнулся с трудностями не бросает, а помогает разобраться что не так. Ну и цена само собой, лучшая что я пока встретил на рынке.
 

Alexmd

Client
Регистрация
10.12.2018
Сообщения
1 021
Благодарностей
1 385
Баллы
113
Софт ушел в приват.
Прошу модераторов закрыть тему. @Mikhail B.
 
Последнее редактирование:
  • Спасибо
Реакции: Apukhov

Aviolas

Новичок
Регистрация
27.03.2024
Сообщения
1
Благодарностей
0
Баллы
1
Мощный инструмент для сбора целевой аудитории под рассылки и/или анализа рынка по конкретным продуктам в целом.

Поддержка 7 версий OLX разных стран: Болгария, Казахстан, Польша, Португалия, Румыния, Узбекистан, Украина.
olx.bg olx.kz olx.pl olx.pt olx.ro olx.ua olx.uz

Удобный и понятный интерфейс
Простота в использовании
Интерактивное меню
Гибкие настройки и разные режимы работы для самых разных целей
Обход лимита в 1000 объявлений
Усовершенствованные алгоритмы
Оптимизированный код

Долгожданный многопоток, очень быстрый парсинг (до 1000 телефонов в минуту)
Без использования браузера
Минимальная нагрузка на железо

Настраиваемый широкий спектр собираемой информации
Подробное руководство по использованию


Требуются расходники в виде прокси и аккаунтов. Аккаунты на тестах показали хорошую выживаемость(около 90-95%). Прокси подходят и самые недорогие пакетные, можно и шаред в 10 рук, но только не бесплатные. На мобильных, также, работать не будет.
Так как для возможности просматривать телефоны в объявлениях теперь нужна авторизация, в нем есть режим регистрации/авторизации аккаунтов для сохранения их в требуемом виде и возможности просматривать телефоны в объявлениях. Отдельное решение под автоматическую регистрацию будет выпущено позже, как отдельный инструмент.

Все выбранные для сбора данные складываются в .xlsx табличку. Пример полных доступных данных по ссылке ниже:

https://docs.google.com/spreadsheets/d/1fnXYlghNAojvzPb1KreEIdqf-KL1BP0xqDts7aFG70s/edit
_______________________________________________________________________________________________________________________________________________________


Софт ушел в приват.

По ВСЕМ непонятным вопросам обращаться в ЛС или Telegram: @Zenno_bots (кликабельно) Остерегайтесь мошенников!

Не засоряйте тему постами, не касающимися опыта использования шаблона и не несущими смысловой нагрузки.



_______________________________________________________________________________________________________________________________________________________





как с вами связаться, указанный бот не находится
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)