Парсер Яндекс Вордстат

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
196
Благодарностей
260
Баллы
63
Описание

Для работы с Яндекс Вордстат необходима авторизация. Её производим через указанные в настройках данных входа в систему. Разгадываем капчу при необходимости. При удачной авторизации будет сохранён профиль, что должно избавить от необходимости авторизации в будущем. Шаблон будет парсить результаты по каждому ключу столько страниц, сколько указано в настройках с заданной глубиной. Результат будет сохранятся в файл с именем в виде даты.
Шаблон однопоточный.

Как пользоваться?

1. Логин
Логин для авторизации на яндексе

2. Пароль
Пароль для авторизации на яндексе

3. Модуль распознавания капчи
Для капчи, которая может возникнуть на этапе авторизации

4. Сколько страниц парсить
Количество страниц выдачи для каждого ключа

5. Глубина
Количество кругов парсинга с учётом новых ключей

6. Ключи
Список ключей

За одно выполнение шаблон прогонит все ключи. Результат будет записываться в файл с именем дата.txt. Дата в формате yyyyMMddHHmmss
 
Категория
Парсинг, SEO
Тип шаблона
Открытый
Многопоточность
Нет
Дата обновления
31.08.2020
Описание обновления
Обновлена проверка авторизации

Вложения

Для запуска проектов требуется программа ZennoPoster.
Это основное приложение, предназначенное для выполнения автоматизированных шаблонов действий (ботов).
Подробнее...

Для того чтобы запустить шаблон, откройте программу ZennoPoster. Нажмите кнопку «Добавить», и выберите файл проекта, который хотите запустить.
Подробнее о том, где и как выполняется проект.

Последнее редактирование:

She

Client
Регистрация
11.01.2017
Сообщения
122
Благодарностей
23
Баллы
18
Доброго дня @Yosemite
Большое спасибо за этот замечательный шаблон. Очень помогает и очень экономит время. Благодарствую за вашу работу.
1.Сделайте пожалуйста автосохранение напаршенных списков.
Паршу копиями шаба по 10-20 потоков сразу.При парсинге до 1-2 глубины очень часто парсинг обрывается на ошибке.
"Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска".
Я делаю так:1 копия шаблона всегда парсит только 1 ключ.
Обидно,когда 1-2 суток парсятся ключи с большим количеством результата выдачи, и дни парсинга уходят коту под хвост. Часто приходится по несколько раз перезапускать парсинг одного и того же ключа, и это не есть гарантия того, что шаб опять не закончит парсинг с ошибкой. Парсю всё через один подтвержденный в яндексе акк.


2.Подскажите пожалуйста по настройкам - сколько страниц парсить, максимум можно указать сколько угодно, но по факту правильной цифрой будет 100? Ставил и 1000 и 100 ошибка HTML одинаково вылезает на некоторых ключах.
3.Глубина максимально какая возможна?Максимум ставил 3,но дальше 2й не проходил.
 

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
196
Благодарностей
260
Баллы
63
Добрый день!

При парсинге до 1-2 глубины очень часто парсинг обрывается на ошибке.
"Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска".
На каком именно экшене появляется ошибка не смотрели? Чтобы узнать, нужно правой кнопкой кликнуть по оповещению и нажать "Скопировать id действия".
Сейчас шаблон тестируется, позже будет доработан.

2.Подскажите пожалуйста по настройкам - сколько страниц парсить,
При указании 100 страниц скорее всего спарсятся все, что есть. Судя по тестам, для всех запросов выдаётся 41 страница

3.Глубина максимально какая возможна?Максимум ставил 3,но дальше 2й не проходил.
Нужно тестировать после того, как перестанет появляться ошибка
 
Последнее редактирование:
  • Спасибо
Реакции: She

She

Client
Регистрация
11.01.2017
Сообщения
122
Благодарностей
23
Баллы
18
Добрый день!



На каком именно экшене появляется ошибка не смотрели? Чтобы узнать, нужно правой кнопкой кликнуть по оповещению и нажать "Скопировать id действия".
Доброго дня @Yosemite
59deed10-18e7-4776-b4e1-a1e054cb4b3f
 

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
196
Благодарностей
260
Баллы
63
Доброго дня @Yosemite
59deed10-18e7-4776-b4e1-a1e054cb4b3f
Шаблон обновлён.

Добавлено время ожидания, если не удаётся ввести очередной ключ.
Если ввести так и не удалось, создаётся папка, в неё сохраняется txt файл с ключами, которые не удалось обработать, в названии последний взятый ключ. А так же файл с результатами на текущий момент.

Если шаблон завершается успешно, так же создаётся папка, а в ней файл с результатами
 
  • Спасибо
Реакции: antyspama и She

She

Client
Регистрация
11.01.2017
Сообщения
122
Благодарностей
23
Баллы
18
Добрый день @Yosemite
Обновите пожалуйста
Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска
b4b0f4a8-b0ea-4c26-8d02-a65123163dea
 

She

Client
Регистрация
11.01.2017
Сообщения
122
Благодарностей
23
Баллы
18
Добрый день @Yosemite
Обновите пожалуйста
 

She

Client
Регистрация
11.01.2017
Сообщения
122
Благодарностей
23
Баллы
18
Добрый день @Yosemite
Обновите пожалуйста
Выполнение действия HtmlElement Не найден HTML элемент, по условиям поиска
b4b0f4a8-b0ea-4c26-8d02-a65123163dea
 

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
196
Благодарностей
260
Баллы
63
  • Спасибо
Реакции: SladkijS

She

Client
Регистрация
11.01.2017
Сообщения
122
Благодарностей
23
Баллы
18
Добрый день @Yosemite спасибо за обновление шаблона.
А для гугла такой же шаблон можете сделать?
С гугла вообще реально такие же данные подтягивать?

Я видел шаблон гугл-трендс.Но это не то.
 

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
196
Благодарностей
260
Баллы
63
Добрый день @Yosemite спасибо за обновление шаблона.
А для гугла такой же шаблон можете сделать?
С гугла вообще реально такие же данные подтягивать?

Я видел шаблон гугл-трендс.Но это не то.
Добрый день.
Что вы имеете в виду под фразой "такой же шаблон"?
На каком сервисе он должен собирать информацию, какую именно?

Почему не подходит гугл трендс?
Вы про этот шаблон?
 

maksimal2

Client
Регистрация
17.12.2019
Сообщения
20
Благодарностей
6
Баллы
3
Добрый день, не подскажите , в чём может быть проблема:
Сообщение
Не нашли капчу при авторизации. Возможно она не требуется. Проверяем статус авторизации.
Не удалось авторизоваться. Причина не известна. После разгадывания капчи не удалось найти элемент с логином
ZennoPoster Проект G:\проекты зенопостер\_yandex_wordstat\yandex_wordstat.xmlz выполнен успешно!
 
  • Спасибо
Реакции: Yosemite

Yosemite

Creators Template
Регистрация
29.08.2019
Сообщения
196
Благодарностей
260
Баллы
63
Добрый день, не подскажите , в чём может быть проблема:
Сообщение
Не нашли капчу при авторизации. Возможно она не требуется. Проверяем статус авторизации.
Не удалось авторизоваться. Причина не известна. После разгадывания капчи не удалось найти элемент с логином
ZennoPoster Проект G:\проекты зенопостер\_yandex_wordstat\yandex_wordstat.xmlz выполнен успешно!
Добрый день!
Обновлена авторизация, теперь должно работать правильно
 
  • Спасибо
Реакции: golodec1989

Coopertino

Пользователь
Регистрация
13.02.2015
Сообщения
48
Благодарностей
1
Баллы
8
А шаблон еще рабочий? Не парсит - завис.
 

golodec1989

Client
Регистрация
30.05.2019
Сообщения
14
Благодарностей
2
Баллы
3
Отличный шаблон, конкретно выручает. Большое спасибо. А не могли бы выбор региона добавить?
 

golodec1989

Client
Регистрация
30.05.2019
Сообщения
14
Благодарностей
2
Баллы
3
Регион можно в инстансе поменять. Единственный минус, слова в один файл пишутся, если прервать, то все в никуда. Было бы круто, если бы каждое ключевое слово в отдельный файл записывалось.
 

BoogerMel

Client
Регистрация
04.07.2021
Сообщения
2
Благодарностей
0
Баллы
1
Добрый день,
Архив битый, можно попросить обновить?
Спасибо!
 

garikn

Client
Регистрация
03.08.2021
Сообщения
87
Благодарностей
11
Баллы
8
Добрый день!
Обновлена авторизация, теперь должно работать правильно
Добрый день,
Архив битый, можно попросить обновить?
Спасибо!
В первом посте написано, что архив обновлен "Последнее редактирование: 04.12.2019 ".
Получается, что не рабочий шаблон. А тема Постером накручена))))))
 

Rusv

Client
Регистрация
04.09.2021
Сообщения
17
Благодарностей
1
Баллы
3
Привет! А можно реализовать функцию выбора региона в настройках шаблона?
 

She

Client
Регистрация
11.01.2017
Сообщения
122
Благодарностей
23
Баллы
18
Здравствуйте @Yosemite или его заместитель. Обновите пожалуйста шаблон.
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)