Парсер Яндекс Вордстат

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
179
Благодарностей
185
Баллы
43
Описание

Для работы с Яндекс Вордстат необходима авторизация. Её производим через указанные в настройках данных входа в систему. Разгадываем капчу при необходимости. При удачной авторизации будет сохранён профиль, что должно избавить от необходимости авторизации в будущем. Шаблон будет парсить результаты по каждому ключу столько страниц, сколько указано в настройках с заданной глубиной. Результат будет сохранятся в файл с именем в виде даты.
Шаблон однопоточный.

Как пользоваться?

1. Логин
Логин для авторизации на яндексе

2. Пароль
Пароль для авторизации на яндексе

3. Модуль распознавания капчи
Для капчи, которая может возникнуть на этапе авторизации

4. Сколько страниц парсить
Количество страниц выдачи для каждого ключа

5. Глубина
Количество кругов парсинга с учётом новых ключей

6. Ключи
Список ключей

За одно выполнение шаблон прогонит все ключи. Результат будет записываться в файл с именем дата.txt. Дата в формате yyyyMMddHHmmss
 
Категория
Парсинг, SEO
Тип шаблона
Открытый
Многопоточность
Нет
Дата обновления
31.08.2020
Описание обновления
Обновлена проверка авторизации

Вложения

Для запуска проектов требуется программа ZennoPoster.
Это основное приложение, предназначенное для выполнения автоматизированных шаблонов действий (ботов).
Подробнее...

Для того чтобы запустить шаблон, откройте программу ZennoPoster. Нажмите кнопку «Добавить», и выберите файл проекта, который хотите запустить.
Подробнее о том, где и как выполняется проект.

Последнее редактирование:
  • Спасибо
Реакции: Sergey

She

Client
Регистрация
11.01.2017
Сообщения
116
Благодарностей
18
Баллы
18
Доброго дня @Yosemite
Большое спасибо за этот замечательный шаблон. Очень помогает и очень экономит время. Благодарствую за вашу работу.
1.Сделайте пожалуйста автосохранение напаршенных списков.
Паршу копиями шаба по 10-20 потоков сразу.При парсинге до 1-2 глубины очень часто парсинг обрывается на ошибке.
"Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска".
Я делаю так:1 копия шаблона всегда парсит только 1 ключ.
Обидно,когда 1-2 суток парсятся ключи с большим количеством результата выдачи, и дни парсинга уходят коту под хвост. Часто приходится по несколько раз перезапускать парсинг одного и того же ключа, и это не есть гарантия того, что шаб опять не закончит парсинг с ошибкой. Парсю всё через один подтвержденный в яндексе акк.


2.Подскажите пожалуйста по настройкам - сколько страниц парсить, максимум можно указать сколько угодно, но по факту правильной цифрой будет 100? Ставил и 1000 и 100 ошибка HTML одинаково вылезает на некоторых ключах.
3.Глубина максимально какая возможна?Максимум ставил 3,но дальше 2й не проходил.
 

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
179
Благодарностей
185
Баллы
43
Добрый день!

При парсинге до 1-2 глубины очень часто парсинг обрывается на ошибке.
"Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска".
На каком именно экшене появляется ошибка не смотрели? Чтобы узнать, нужно правой кнопкой кликнуть по оповещению и нажать "Скопировать id действия".
Сейчас шаблон тестируется, позже будет доработан.

2.Подскажите пожалуйста по настройкам - сколько страниц парсить,
При указании 100 страниц скорее всего спарсятся все, что есть. Судя по тестам, для всех запросов выдаётся 41 страница

3.Глубина максимально какая возможна?Максимум ставил 3,но дальше 2й не проходил.
Нужно тестировать после того, как перестанет появляться ошибка
 
Последнее редактирование:
  • Спасибо
Реакции: She

She

Client
Регистрация
11.01.2017
Сообщения
116
Благодарностей
18
Баллы
18
Добрый день!



На каком именно экшене появляется ошибка не смотрели? Чтобы узнать, нужно правой кнопкой кликнуть по оповещению и нажать "Скопировать id действия".
Доброго дня @Yosemite
59deed10-18e7-4776-b4e1-a1e054cb4b3f
 

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
179
Благодарностей
185
Баллы
43
Доброго дня @Yosemite
59deed10-18e7-4776-b4e1-a1e054cb4b3f
Шаблон обновлён.

Добавлено время ожидания, если не удаётся ввести очередной ключ.
Если ввести так и не удалось, создаётся папка, в неё сохраняется txt файл с ключами, которые не удалось обработать, в названии последний взятый ключ. А так же файл с результатами на текущий момент.

Если шаблон завершается успешно, так же создаётся папка, а в ней файл с результатами
 
  • Спасибо
Реакции: antyspama и She

She

Client
Регистрация
11.01.2017
Сообщения
116
Благодарностей
18
Баллы
18
Добрый день @Yosemite
Обновите пожалуйста
Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска
b4b0f4a8-b0ea-4c26-8d02-a65123163dea
 

She

Client
Регистрация
11.01.2017
Сообщения
116
Благодарностей
18
Баллы
18
Добрый день @Yosemite
Обновите пожалуйста
 

She

Client
Регистрация
11.01.2017
Сообщения
116
Благодарностей
18
Баллы
18
Добрый день @Yosemite
Обновите пожалуйста
Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска
b4b0f4a8-b0ea-4c26-8d02-a65123163dea
 

She

Client
Регистрация
11.01.2017
Сообщения
116
Благодарностей
18
Баллы
18
Добрый день @Yosemite спасибо за обновление шаблона.
А для гугла такой же шаблон можете сделать?
С гугла вообще реально такие же данные подтягивать?

Я видел шаблон гугл-трендс.Но это не то.
 

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
179
Благодарностей
185
Баллы
43
Добрый день @Yosemite спасибо за обновление шаблона.
А для гугла такой же шаблон можете сделать?
С гугла вообще реально такие же данные подтягивать?

Я видел шаблон гугл-трендс.Но это не то.
Добрый день.
Что вы имеете в виду под фразой "такой же шаблон"?
На каком сервисе он должен собирать информацию, какую именно?

Почему не подходит гугл трендс?
Вы про этот шаблон?
 

maksimal2

Client
Регистрация
17.12.2019
Сообщения
1
Благодарностей
1
Баллы
3
Добрый день, не подскажите , в чём может быть проблема:
Сообщение
Не нашли капчу при авторизации. Возможно она не требуется. Проверяем статус авторизации.
Не удалось авторизоваться. Причина не известна. После разгадывания капчи не удалось найти элемент с логином
ZennoPoster Проект G:\проекты зенопостер\_yandex_wordstat\yandex_wordstat.xmlz выполнен успешно!
 
  • Спасибо
Реакции: Yosemite

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
179
Благодарностей
185
Баллы
43
Добрый день, не подскажите , в чём может быть проблема:
Сообщение
Не нашли капчу при авторизации. Возможно она не требуется. Проверяем статус авторизации.
Не удалось авторизоваться. Причина не известна. После разгадывания капчи не удалось найти элемент с логином
ZennoPoster Проект G:\проекты зенопостер\_yandex_wordstat\yandex_wordstat.xmlz выполнен успешно!
Добрый день!
Обновлена авторизация, теперь должно работать правильно
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)