Парсер постов Twitter

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
Описание

Шаблон устанавливает прокси, получает ссылку для парсинга, переходит по ней.
Загружает нужное количество твитов (или все, если во входных настройках указан 0), переносит все в список.
Получает твиты по одному, парсит из каждого ссылку, автора, время публикации, количество лайков, ретвитов, комментариев, записывает данные в таблицу.
когда все твиты обработаны, таблица сохраняется в файл, шаблон переходит к следующей ссылке.

Как пользоваться?

Во входных настройках указать ссылки на страницы для парсинга и количество постов, которые нужно обработать.

Данные сохраняются в .csv файл в папку Results в формате "Ссылка, автор, дата, ответы, ретвиты, лайки". В названии логин из ссылки и дата_время.
 
Категория
Парсинг
Тип шаблона
Открытый
Многопоточность
Нет
Дата обновления
17.12.2020
Описание обновления
Обновлён парсинг данных.
Добавлены дополнительные проверки и оповещения.
Добавлена пауза при загрузке.
Изменён формат даты в названии

Вложения

Для запуска проектов требуется программа ZennoPoster.
Это основное приложение, предназначенное для выполнения автоматизированных шаблонов действий (ботов).
Подробнее...

Для того чтобы запустить шаблон, откройте программу ZennoPoster. Нажмите кнопку «Добавить», и выберите файл проекта, который хотите запустить.
Подробнее о том, где и как выполняется проект.

foast

Client
Регистрация
27.07.2018
Сообщения
17
Благодарностей
5
Баллы
3
Описание

Шаблон устанавливает прокси, получает ссылку для парсинга, переходит по ней.
Загружает нужное количество твитов (или все, если во входных настройках указан 0), переносит все в список.
Получает твиты по одному, парсит из каждого ссылку, автора, время публикации, количество лайков, ретвитов, комментариев, записывает данные в таблицу.
когда все твиты обработаны, таблица сохраняется в файл, шаблон переходит к следующей ссылке.

Как пользоваться?

Во входных настройках указать ссылки на страницы для парсинга и количество постов, которые нужно обработать.

Данные сохраняются в .csv файл в папку Results в формате "Ссылка, автор, дата, ответы, ретвиты, лайки". В названии логин из ссылки и дата_время.
А сам текст твита сохраняется?
 

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63

foast

Client
Регистрация
27.07.2018
Сообщения
17
Благодарностей
5
Баллы
3

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63

Lexin

Client
Регистрация
22.12.2015
Сообщения
17
Благодарностей
3
Баллы
3
Запускал шаблон и с прокси, и без них. Указывал ссылку в формате https://twitter.com/XXXX и просто ХХХХ, прогресс 0%. Лог пустой, ставил задачу спарсить 5 твитов, 2 результата нет. В чем может быть дело?
 

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
Запускал шаблон и с прокси, и без них. Указывал ссылку в формате https://twitter.com/XXXX и просто ХХХХ, прогресс 0%. Лог пустой, ставил задачу спарсить 5 твитов, 2 результата нет. В чем может быть дело?
Шаблон обновлён. Сейчас проблемы сохраняются, или всё работает?
 

kuppyc

Client
Регистрация
13.06.2015
Сообщения
27
Благодарностей
1
Баллы
3
Привет, прогонял шаблончик в ручную без прокси, в result ничего нет, актуален ли еще шаб ? Есть у кого работает ?
 

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
Привет, прогонял шаблончик в ручную без прокси, в result ничего нет, актуален ли еще шаб ? Есть у кого работает ?
Проверил сейчас, результаты сохраняются.
Какая версия ZP?
 
  • Спасибо
Реакции: kuppyc

kuppyc

Client
Регистрация
13.06.2015
Сообщения
27
Благодарностей
1
Баллы
3
Последнее редактирование:

kuppyc

Client
Регистрация
13.06.2015
Сообщения
27
Благодарностей
1
Баллы
3
Больше 500 постов не парсит, это твиттера ограничение ? у одного и того же автора
Возможно ли как то обойти это ограничение ?
 

vrska

Client
Регистрация
07.02.2010
Сообщения
589
Благодарностей
406
Баллы
63
Больше 500 постов не парсит, это твиттера ограничение ? у одного и того же автора
Возможно ли как то обойти это ограничение ?
Возможно, лимит для смертных 3200
 

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Благодарностей
347
Баллы
63
Больше 500 постов не парсит, это твиттера ограничение ? у одного и того же автора
Возможно ли как то обойти это ограничение ?
Обновил шаблон, сейчас должен парсить больше постов.
Но в любом случае какое-то ограничение от твиттера есть, у меня на тестах сейчас раньше 4 февраля не подгружались посты
 

kuppyc

Client
Регистрация
13.06.2015
Сообщения
27
Благодарностей
1
Баллы
3
Обновил шаблон, сейчас должен парсить больше постов.
Но в любом случае какое-то ограничение от твиттера есть, у меня на тестах сейчас раньше 4 февраля не подгружались посты
Спасибо)
 
Последнее редактирование:

AGAT

Активный пользователь
Регистрация
17.11.2018
Сообщения
134
Благодарностей
33
Баллы
28
Hitachi приветствую,
подскажи пожалуйста, шаблон рабочий?
 

Sergodjan

Administrator
Команда форума
Регистрация
05.09.2012
Сообщения
19 360
Благодарностей
8 645
Баллы
113
Сейчас проверял по надобности, шаблон отлично работает.
 
  • Спасибо
Реакции: Santorini

igor777

Новичок
Регистрация
13.08.2021
Сообщения
5
Благодарностей
0
Баллы
1
а хэштеги может мониторить?
 

viktor382331

Новичок
Регистрация
14.10.2021
Сообщения
2
Благодарностей
0
Баллы
1

viktor382331

Новичок
Регистрация
14.10.2021
Сообщения
2
Благодарностей
0
Баллы
1
Описание

Шаблон устанавливает прокси, получает ссылку для парсинга, переходит по ней.
Загружает нужное количество твитов (или все, если во входных настройках указан 0), переносит все в список.
Получает твиты по одному, парсит из каждого ссылку, автора, время публикации, количество лайков, ретвитов, комментариев, записывает данные в таблицу.
когда все твиты обработаны, таблица сохраняется в файл, шаблон переходит к следующей ссылке.

Как пользоваться?

Во входных настройках указать ссылки на страницы для парсинга и количество постов, которые нужно обработать.

Данные сохраняются в .csv файл в папку Results в формате "Ссылка, автор, дата, ответы, ретвиты, лайки". В названии логин из ссылки и дата_время.
а какой пароль от архива
?
 

Sergodjan

Administrator
Команда форума
Регистрация
05.09.2012
Сообщения
19 360
Благодарностей
8 645
Баллы
113

Kalashnikov081985

Новичок
Регистрация
15.06.2023
Сообщения
1
Благодарностей
0
Баллы
1
Привет, недавно начал пользоваться этой программой. Не понимаю, что делать с парсером. Нужно помимо того файла, что ты дал, еще создать папки с инфой? подскажи пожалуйста
 

KokaSEO

Client
Регистрация
17.01.2015
Сообщения
191
Благодарностей
75
Баллы
28
Привет, недавно начал пользоваться этой программой. Не понимаю, что делать с парсером. Нужно помимо того файла, что ты дал, еще создать папки с инфой? подскажи пожалуйста
Вряд ли он подскажет
108436
 

Kalashnikov

Новичок
Регистрация
13.06.2023
Сообщения
1
Благодарностей
0
Баллы
1

KokaSEO

Client
Регистрация
17.01.2015
Сообщения
191
Благодарностей
75
Баллы
28
Осваивать прогу
Ну или нанимать разработчиков под свои задачи
В любом случае на минимальном уровне прогу лучше освоить, иначе даже с покупными шабами сложно будет
 
Регистрация
15.04.2016
Сообщения
616
Благодарностей
104
Баллы
43
Актуализировали шаблон

Полностью прокомментированный, с описанием и объяснением действий
Добавили работу с почтами KOPEECHKA.STORE


При возникновении вопросов обращайтесь в нашу техническую поддержку
 

Вложения

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)