парсинг

  1. yarchino

    Легко настраиваемый парсер любого маркетплейса

    Шаблон для парсинга всех объявлений с (дошки объявлений, интернет магазина и так далее) Парсинг на примере сайта kolesa Шаблон легко можно изменить и спарсить другой сайт (например avito, olx или любой другой маркетплейс) Структура шаблона Файлы 1)price_mini_max (Цены для парсинга)...
  2. DrunkDeath

    Парсер номеров и имён с Юлы с последующей разбивкой по операторам {Get/Post}

    Доброго времени суток. Представляю Вам парсер номеров и имён продавцов с сайта youla.ru. Шаблон написан на Post/Get запросах. Имеет функцию рассортировать полученные номера по операторам. Входные настройки шаблона: Ссылка из поиска - сюда вставляете ссылку из поиска товаров с выбранными...
  3. B

    Парсинг данных OLX

    возможнен как разовый парсинг объявлений (включая телефоны и местоположения), так и с частотой несколько раз в день любой формат выгрузки данных стоимость варьируется от количества и частоты обновления данных есть возможность получать данные по API писать на [email protected]
  4. Gor

    302 ошибка запроса в Трафике. Как к ней подойти?

    Господа, я вас приветствую! Делаю парсер поисковой выдачи mail.ru на запросах. Пытаюсь решить на запросах капчу. Отследил Post запрос, который отправляет результат решения капчи на проверку. Есть проблемка. Этот Post при отправке через браузер с ошибкой 302 (ресурса по этому адресу нет по идее...
  5. D

    Как спарсить ссылки на картинки?

    Приветствую, Задача спарсить ссылки на картинки с доски обьявлений. ( Тренируюсь на курсе от rostonix ) Пробую вытягивать регуляркой, но вместо 3х-4х нужных ( нужные в отдельном блоке, как я понял ) получается от 10-16 левых, которые находятся в это время на стр. Моя регулярка...
  6. Ramonchek

    Как скачать фото с Google Maps?

    https://www.google.com.ua/maps/place/Kiev+Zoo/@50.452123,30.462279,3a,75y,90t/data=!3m8!1e2!3m6!1sAF1QipPyg_ivEBRX_4o3opoc9v-y2XCH3oTI3dHwXbI3!2e10!3e12!6shttps:%2F%2Flh5.googleusercontent.com%2Fp%2FAF1QipPyg_ivEBRX_4o3opoc9v-y2XCH3oTI3dHwXbI3%3Dw203-h114-k-no!7i5344!8i3006!4m8!1m2!2m1!1sgoogle+m...
  7. D

    Парсинг email адресов с использованием базы данных

    Емаил маркетинг - одно из очень популярных и перспективных направлений. Хочу поделиться своими наработками по этой теме. Это не кнопка бабло, но это поможет вам подстроить шаблон под свою задумку или взять некоторые технические реализации. В целом спарсить почту с сайта не очень сложно, но не...
  8. Yura1206

    Недорогой парсинг компаний из 2GIS

    Оказываю услуги парсинга компаний из 2GIS: Одна рубрика по одному городу - 100 рублей. Одна рубрика по двум городам - 150 рублей. Одна рубрика по всем городам одной страны - 600 рублей. Две рубрики по одному городу - 125 рублей. Две рубрики по двум городам - 250 рублей. Две рубрики по...
  9. Storeoftraffic

    База Twitter

    Здравствуйте. Подскажите пожалуйста, где можно взять или как сделать спарсенную Ру базу Twitter для рекламы RMG продуктов? Спасибо @pasha_job
  10. Kirillzenp

    Работа с таблицей на сайте

    Ребята! Как настроить клик по ячейке с Кф этой таблицы на сайте. В переменной есть играющие команды, исход, Кф. Нужно правильно попасть в ячейку. В таблице могут быть одинаковые Кф, поэтому нельзя настроить клик по InnerText. Допустим нужно попасть в Россия - Египет П1(отмечено красным...
  11. XeteData

    Собрать данные > Наполнить ресурс - Любой формат, Любой источник

    Здравствуйте. Поможем Вам наполнить любой ресурс: собрать данные с нужного источника и добавить данные на нужный источник. Собрать товары, статьи, файлы, контакты и тд: - с Интернет-магазинов - с Крупных площадок - с Соц. Сетей - с Форумов, Блогов - с Таблиц и баз данных - Любой другой вариант...
  12. Lord_Alfred

    3 место  Конвейер ⃰ по парсингу баз ключевиков (заголовков статей) от Грибника

    Вот и пришло время рассказать о моей "небольшой" уникальной разработке, которую я делал и тестировал более 2х недель :-) Предисловие Наверняка многие из тех, кто тут занимается дорвеестроительством и SEO сталкивались с тем, что для получения качественных результатов необходимо создавать...
  13. D

    Парсинг картинок с pixabay.com (через API циклом Parallel.For)

    Всем привет. Хочу представить свой шаблон по поиску изображений на бесплатном фотостоке pixabay.com. Расскажу более подробно, что было сделано. Для работы через api нужно изучить документацию на https://pixabay.com/api/docs/ После простой регистрации на этой же странице нужно сохранить свой...
  14. Lover

    Парсинг выдачи

    Здравствуйте, как вы уже поняли из названия раздела, я новичёк. У меня такая проблема: Я парщу выдачу гугла и яндекса. Но спустя какое-то время у меня выходи бан, точнее появляется капча. Вот я и хотел бы узнать как вы боритесь с такой проблемой, может кто совет даст. Заранее всех благодарю)
  15. ssXXXss

    GroupsParseMailRu - ультрабыстрый парсер участников с груп mail.ru

    Всех приветствую! Предлагаю вашему вниманию GroupsParseMailRu.v1.0.0 GET&POST Работает не используя прокси так как не вижу необходимости, при необходимости можно подключить Работает в один поток Без привязки списков и таблиц Сделал уменьшение обращения к файлам что увеличило скорость и...
  16. potolokwiki

    Вопрос по парсингу semrush

    Всем привет. Подскажите по поводу оптимизации проекта. Написал парсер сервиса semrush. Сейчас логика работы такая: - логинимся в сервисе - берем ключ из списка - вставляем в поле поиска - ищем - скачиваем результат - конец Чтобы спарсить следующий ключ, нужно опять залогиниться и выполнить...
  17. orka13

    Ищу алгоритм парсинга текста статьи HTML-страницы (без меню, футеров и прочего мусора)

    Сейчас имею свой парсер на регулярках + HtmlDecode (хотя эту связку лучше на HtmlAgilityPack заменить). Но он просто весь текст вытягивает со страницы. А хотелось бы как-то умно достать только главный блок с телом статьи. Пока у меня такие варианты: 1. В настройках указал брать только явные...
  18. inilim

    Корявый html код на сайте не дает спарсить

    Здравствуйте. Есть сайт со статистикой результатов тенниса, хочу спарсить результаты матча, но из-за не понятного вывода html кода, не могу придумать как спарсить результат, смотрим код: Пример 1 Подцеплял значение inner тегов td, но результат нужна в строчку. <td class="left" width="40%">...
  19. a10ne

    Парсинг/постинг/автоматизация/код - услуги для вебмастеров!

    Приветствую всех форумчан! Я такой же вебмастер-фрилансер, как и вы, поэтому по себе знаю, как важно найти надежного исполнителя. В моем арсенале: A-Parser ZennoPoster Zebroid KeyCollector Всегда есть подписка на быстрые прокси. Самостоятельно пишу приложения/скрипты на PHP. Вы можете...
  20. A

    Как поставить условия для парсинга? Если условия не соответстует, то не парсить.

    На сайсе есть лента из кучи ссылок и все такое. Там на некоторых товарах есть купоны, а на некоторые нету, в этом и проблема. Я Сделал парсер, но его проблема заключается в рассинхроне. А именно он парсит ВСЕ название там где нет купонов тоже. И парсятся паралельно только купоны, если эту инфу...
  21. vertigo141

    Парсинг GET запросом

    Приветствую Возникла сложность со спортивным ресурсом https://mobile.bet365.com/#type=InPlay. Цель парсинга: собрать все кф, всех событий, всех видов спорта и отслеживать их в реальном времени каждую минуту. Логичнее было бы сделать с помощью запросов. Как это сделать ? Предполагал, что...
  22. A

    Как спарсить прокси с url? прокси находятся в под url'ах

    Собственно вопрос
  23. socrobotic

    Парсинг данных c#

    Всем привет, как обычно парсю данные, просто появилась неободимость получать рандомное значение а не первую спарсенную строчку. Как получить например 3ю строчку? На данный момент береться первая строчка:
  24. lesssss81

    Как парсить часть письма с почты

    Здравствуйте, стоит задача с присланного по почте письма спарсить пароль и определить его в переменную. Как это выполнить? Заранее спасибо.
  25. Lord_Alfred

    Работа с XML через C# (xml, обработанный через кубик Парсинг XML)

    Второй раз сталкиваюсь и не понимаю - то ли багует зенка, то ли я что-то не так делаю. зенка при приведении к string зачем-то добавляет теги внешние, а без приведения к string - не принимает тип. т.е. вытаскиваю xml.urlset.url.loc (сайтмеп паршу), она при доступе к...
  26. XeteData

    XeteData: Собрать данные > Наполнить ресурс - Любой формат, Любой источник

    Здравствуйте. Поможем Вам наполнить любой ресурс: собрать данные с нужного источника и добавить данные на нужный источник. Собрать товары, статьи, файлы, контакты и тд: ____с Интернет-магазинов ____с Крупных площадок ____с Соц. Сетей ____с Форумов, Блогов ____с С таблиц и баз данных ____любой...
  27. A

    Парсинг характеристик товаров

    Вопрос в правильности направления движения - (для новичка, т.е. просьба подробно, понятно, для нуба) задача - с интернет магазина спарсить товары с характеристиками и разложить эти характеристики в файл xls или csv 1 захожу в каталог товара нужной категории, паршу ссылки на товары через...
  28. keltuzhaknut

    Как правильно почистить строки от хлама и взять нужный текст?

    Как почистить такой код от хлама и остаить только основной текст?
  29. jacobweb

    Как запрячь Зеннопостер?

    Здравствуйте товарищи, давно не пользовался программой, не обновлял с 2014 года. Хочу найти ей хоть какое-то применение. Вижу на форуме есть много информации по работе и курсы от Rostonixa. Вижу на фрилансе всякие базы продают, можно для их парсинга приспособить Zennoposter? Какие еще услуги...
  30. FBCombiner

    FB Combiner - качественный софт широкого функционала для работы с Facebook

    Facebookpro.ru - Лидер на рынке многофункционального софта для рекламы в FB. Основные продукты: FB Combiner - поиск целевой аудитории и действия с ней (лайки, комментарии и т.д.) FB AccountCreator - регистрация новых аккаунтов, их заполнение и прочее...
  31. V

    Google банит IP при парсинге длинным запросом

    Добрый день всем! Не могу понять, почему Google банит IP при парсинге длинным запросом, но не банит при парсинге коротким простым запросом. К примеру, я ищу в зоне .ru сайты, которые содержат определённую фразу из 4-х слов. При этом Google не ругается даже без использования прокси и спокойно...
  32. VladP

    Увеличение затраченного времени на парсинг

    В общем парсит мой шаблон товары с крупного магазина. С каждым товаром увеличивается время затрачиваемое на парсинг. К примеру за 10 минут в самом начале парсит 10 товаров. Через час уже за 10 минут парсит 1 товар. В чем может быть проблема? Как решить? Спасибо
  33. S

    Автопостинг спарсенного контента в cms wordpress

    Добрый день, реализуем ли шаблон парсинга данных с автоматической отдачей данных в wordpress cms? Заранее спасибо за ссылку или мануал.
  34. rosnordic

    Как положить в переменную ответ get-запроса, который сделал браузер сам.

    При эмулированном клике на целевой кнопке на странице отправляется запрос, мне нужно спарсить его ответ и положить в переменную. Подскажите как это сделать? Сам ответ можно посмотреть руками во вкладке траффик-нужный запрос-ответ, вот там есть кусочек текста, который мне необходимо положить в...
  35. unatoly

    Парсинг данных с сайтов

    Предлагаем профессиональный и оперативный парсинг необходимой вам информации с любых сайтов. Стоимость парсинга складывается из времени программиста на написание робота-парсера и машинного времени на непосредственный сбор нужной вам информации. Базовая стоимость услуги парсинга: 1 500 р за...
  36. A

    Парсинг таблиц

    Доброго времени суток. Имеем таблицу 20 строк на 3 столбца Перебором всех значений таблицы находим нужный элемент. Как взять из таблицы все элементы с данной строки таблицы. Заранее спасибо