❤️ YouTube-Parser v5.0.5 | Мощный парсер данных YouTube

Smbrnr

Новичок
Регистрация
21.05.2019
Сообщения
3
Благодарностей
0
Баллы
1
Спасибо. А может ли парсер парсить первично не видео, а каналы по ключевикам?
 

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113

Smbrnr

Новичок
Регистрация
21.05.2019
Сообщения
3
Благодарностей
0
Баллы
1
Давайте обрисую полностью тогда требования, чтоб по 100 вопросов не задавать. Сможет ли Ваш парсер выполнять задачу поиска каналов по ключевикам, формировать таблицу вида " Канал - кол-во подписчиков - кол-во просмотров - инфа по последним 3-м видео(дата загрузки, кол-во просмотров, кол-во лайков/дизлайков) - инфа о канале - мейл". При этом возможность задавать границы поиска не только по дате, но и по кол-ву подписчиков (например границами: "только каналы от 4000 до 100 000 Сабов"). При этом какая будет скорость Парсинга, если единственный глобальный ограничивающий параметр - это страна парсинга?
 

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Давайте обрисую полностью тогда требования, чтоб по 100 вопросов не задавать. Сможет ли Ваш парсер выполнять задачу поиска каналов по ключевикам, формировать таблицу вида " Канал - кол-во подписчиков - кол-во просмотров - инфа по последним 3-м видео(дата загрузки, кол-во просмотров, кол-во лайков/дизлайков) - инфа о канале - мейл". При этом возможность задавать границы поиска не только по дате, но и по кол-ву подписчиков (например границами: "только каналы от 4000 до 100 000 Сабов"). При этом какая будет скорость Парсинга, если единственный глобальный ограничивающий параметр - это страна парсинга?
1. Сможет ли Ваш парсер выполнять задачу поиска каналов по ключевикам - да.
2. Формировать таблицу вида "Канал - кол-во подписчиков - кол-во просмотров - да
3. Инфа по последним 3-м видео(дата загрузки, кол-во просмотров, кол-во лайков/дизлайков) - да, но фильтровать по 3 последним видео нужно самому в таблице.
4. инфа о канале - мейл - да, если Email указан.
5. При этом возможность задавать границы поиска не только по дате, но и по кол-ву подписчиков (например границами: "только каналы от 4000 до 100 000 Сабов") - да, но только нужно вначале спарсить общее кол-во каналов по поисковым запросам, а потом уже отдельным парсингом собирать информацию о каналах с применением фильтрации.
6. 1 ключ - 6-10 секунд, на входе 400-600 результатов с ключа.
 

Hannes

Client
Регистрация
03.02.2016
Сообщения
494
Благодарностей
232
Баллы
43
Пользуюсь парсером пол года. Функционал отличный. Пока не было задачи по парсингу ютуба, которую не мог бы решить этот парсер. :-)
Поддержка отличная, все вопросы решаются быстро. Рекомендую к сотрудничеству, Дмитрий своё дело знает!
 
  • Спасибо
Реакции: Meteorburn

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.0
  • YouTube-Parser полностью пересобран, каждая функция парсинга полностью переписана
  • Весь парсинг вынесен в общий код, благодаря чему проект оптимизирован на 200%
  • Полностью изменена логика парсинга (если раньше шаблон парсил по 1 странице и делал сохранение в отчёт, то теперь парсит сразу всё количество результатов и потом записывает в отчёт)
  • Все данные теперь собираются через отдельную библиотеку, что увеличило стабильность и скорость парсинга
  • Теперь шаблон умеет менять API из файла прямо во время парсинга (теперь не нужно перезапускать потоки, чтобы продолжить парсинг, шаблон сам заменит ключ из доступных и продолжит с того же места)
  • Добавлены обработчики для всех известных мне ответов от API при парсинге (теперь шаблон напишет, по какой причине не идёт парсинг)
  • Добавлена возможность парсить данные поисковой выдачи и данных видео без API (в связи с урезанием квоты, появилась возможность парсить без API вовсе)
  • Кардинально изменена логика сохранение результатов (теперь не используется множество таблиц для сохранения результатов, шаблон сам умеет создавать таблицы с данными после завершения парсинга)
  • YouTube-Parser теперь генерирует красивые отчёты с возможностью фильтрации
  • При парсинге комментариев сохранена иерархия "Комментариев" и "Ответов". В отчёте видно, на какой комментарий был дан ответ.
  • В парсинге без API можно указывать сколько страниц парсить по ключу
  • Во всех функция шаблон теперь умеет парсить, как по ID-канала, так и по Username
  • Изменения во "Входных Настройках"
  • Убраны не актуальные опции
  • Изменения в "Оповещениях"
  • Почищен проект от мусора
  • Шаблон полностью на C#
  • Множество мелких исправлений
  • Шаблон дополнительно обфусифицирован (зашифрован)
Шаблон обновится 25 июня.
 
  • Спасибо
Реакции: Samouchka

Starle

Client
Регистрация
09.11.2010
Сообщения
18
Благодарностей
4
Баллы
3
Радует что автор не сидит на месте и всё время улучшает свой шаблон, таких вообще единицы, удивляюсь как он вообще всё успевает. Шаблон работает и выполняет свой функционал, парсер позволяет расширить возможности работы с ютубом, например автоматизировать работу с темой, которая имеет большое количество ключей, я пользуюсь несколькими только функциями, но тем он хорошо, что подойдёт если не всем, то почти всем кто работает с ютубом.
 
  • Спасибо
Реакции: Meteorburn

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.1
  • Исправлен баг в функции парсинга подписчиков из файла (шаблон не видел файл с каналами)
Обновление YouTube-Parser 3.2
  • Восстановлена функция скачивания видео и копирование каналов после недавних изменений YouTube
  • В проект добавлены новые DLL-библиотеки
Библиотеки обязательно требуют установки, без них шаблон работать не будет.
 

Aiden

Client
Регистрация
21.06.2017
Сообщения
15
Благодарностей
2
Баллы
3
ok np I will fix thanks so much for the update you rock!!!!
 
  • Спасибо
Реакции: Meteorburn

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.3
  • Улучшен парсинг и скачивание субтитров (в последнее время можно было заметить, что субтитры парсились хаотично, либо сгенерированные или загруженные автором. Сейчас этот баг исправлен: приоритет стоит на "загруженных", если "загруженных" нет, парсятся "сгенерированные")
  • Временно убрана возможность указать количество сущностей на ключ при парсинге поисковой выдачи через API (функция работала не совсем корректно, убрал временно для последующего улучшения)
  • Исправлен парсинг тегов при парсинге данных видео без API (теги парсились одинаковые для всех видео, теперь парсится корректно)
  • Исправлен парсинг данных видео по списку видео (раньше шаблон не видел указанного списка с видео)
  • Испрвлены возможные проблемы со скачиванием видео и копированием канала
  • Обновлены библиотеки
Для работы шаблона нужно перекачать все библиотеки.
 

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.4
  • Добавлена возможность скачивать только аудио дорожку при скачивании видео
  • Исправлен парсинг количества видео в поисковой выдаче через файл
 

Aiden

Client
Регистрация
21.06.2017
Сообщения
15
Благодарностей
2
Баллы
3
Hi were can i download the new version of the parser 3.4 update please
 

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.5
  • Исправлена логика замены API-ключей в потоке (исправлены возможные проблемы при парсинге)
  • Длина видео при парсинге "Данных видео" сохраняется в формате времени по которому можно сделать сортировку
 

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.5.1
  • В парсинг данных канала добавлен сбор категорий канала
  • В парсинг данных канала добавлен сбор страны канала, указанной в настройках канала
  • Добавлена возможность разгадывания рекаптчи при парсинге Email через CapMonsterCloud
  • Исправления в создаваемых результирующих таблицах
  • Исправления и оптимизация сбора данных каналов и посковой выдачи
  • Мелкие исправления в уведомлениях
 

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.5.2
  • Изменения в логике сбора данных
  • Изменения при сохранении таблицы с результатами
  • Изменения в парсинге метаданных канала при парсинге Email
  • Обновление библиотеки EPPlus
  • Обновление других библиотек
 

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.5.3
  • Добавлена возможность парсинга поисковой выдачи по темам, которые YouTube назначил видео, плейлистам, каналам
  • Музыка
  • Десткая музыка
  • Христианская музыка
  • Классическая музыка
  • Кантри
  • Электронная музыка
  • Хип-хоп музыка
  • Инди
  • Джаз
  • Азиатская музыка
  • Латиноамериканская музыка
  • Поп-музыка
  • Регги
  • Ритм-энд-блюз
  • Рок-музыка
  • Соул
  • Игры
  • Экшен
  • Экшн-адвенчер
  • Казуальные
  • Музыка из компьютерных игр
  • Головоломки
  • Гонки
  • РПГ
  • Симуляторы
  • Спортивные игры
  • Стратегии
  • Спорт
  • Американский футбол
  • Бейсбол
  • Баскетбол
  • Бокс
  • Крикет
  • Футбол
  • Гольф
  • Хоккей
  • Смешанные боевые искусства
  • Мотоспорт
  • Реслинг
  • Теннис
  • Волейбол
  • Развлечения
  • Мультфильмы
  • Юмор
  • Кино
  • Изобразительное искусство
  • Стиль жизни
  • Мода
  • Фитнес
  • Еда
  • Здоровье
  • Хобби
  • Домашние животные
  • Красота
  • Технологии
  • Туризм
  • Транспортные средства
  • Знания
  • Общество
  • Переведены темы на русский язык при парсинге данных каналов
  • Добавлена возможность копировать каналы из файла со списком ссылок на каналы (теперь можно копировать сразу несколько каналов, а не по одному)
  • Теперь при парсинге ответов к комментариям они будут сохраняться сверху-вниз по дате, как это и представлено в YouTube
  • Улучшено определение наличие почты в разделе канала "О канала" (некоторые пользователи встречались с ошибкой определения наличия почты на канале )
  • Исправлен парсинг видео по "категориям видео"
  • Парсинг трансляций теперь не отдельная сущность, а сущность отсносящаяся к видео (для видео добавлен фильтр по трансляциям)
  • Изменения в оповещениях при парсинге почт
Шаблон теперь распространяется по подписке (абонплата)
 
Последнее редактирование:

Seoshniks

Новичок
Регистрация
16.02.2020
Сообщения
2
Благодарностей
0
Баллы
1
Парсер умеет парсить видосы с раздела Тренды с нужного гео?
 

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113

Anatrop

Новичок
Регистрация
11.03.2020
Сообщения
1
Благодарностей
1
Баллы
3
Отличный и очень гибкий скрипт. Скорость работы поражает. Единственный минус - разбивание результатов на отдельные таблицы при работе в многопотоке, но лечится двумя скриптами из интернета на объединение таблиц. Поэтому вообще никакого геморроя, автоматизация шикарная. Разработчику отдельное спасибо за помощь с вопросами
 
  • Спасибо
Реакции: Meteorburn

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.5.5
  • Переработаны функции парсинга без использования API.

  1. Парсинг поисковой выдачи
  2. Парсинг данных канала
  3. Парсинг данных видео

  • Теперь парсинги без API полноценно могут использовать прокси (http, socks4, socks5)
  • Парсинг контактов теперь не использует API
  • Парсинг почт теперь не использует API
  • Скачивание субтитров теперь не использует API
  • Скачивание видео теперь не использует API
  • Копирование каналов теперь не использует API
  • В парсинг данных каналов без API добавлена возможность предварительной фильтрации по подписчикам и просмотрам
  • В парсинг почт добавлена возможность парсить почту из описания канала
  • В результирующую таблицу данных видео и поисковой выдачи из парсингов без API добавена ячейка "категории видео"
  • В результирующую таблицу с почтами добавлена новая ячейка - "страна канала"
  • В результирующую таблицу с данными видео из парсинга данных видео без API добавлена ячейка - "количество комментариев"
  • При парсинге данных каналов без API собирается дополнительная информация о наличии почты на канале под Recaptcha (теперь можно сразу отфильтровать каналы с почтами и парсить по ним)
  • При скачивании субтитров теперь есть опция выбора какие субтитры скачивать: "Авторские", "Сгенерированные" или "Доступные"
  • Переработана функция скачивания видео (при скачивании аудиопотока теперь скачивается максимальное качество аудио и другие изменения)
  • Скачивание видео возможно запускать многопоточно по списку ссылок на видео
  • Оптимизирован забор нового ключа API при израсходовании квоты (раньше шаблон перебирал каждый раз список перед взятием нового ключа, на что затрачивалось время)
  • Во все парсинги без API добавлены "ограничивающие" параметры для потоков, чтобы была возможность каждому потоку назначить свой прокси и количество данных для сбора (раньше поток пытался собирать сразу все данные, из-за чего была большая вероятность попасть на каптчу или ошибку 429 Two many requests)
  • Изменения в оповещениях
  • Изменения во входных настройках шаблона (часть настроек была перенесена на отдельную вкладку)
  • Изменены файлы проекта (конфигурационные файлы были перемещены в отдельную папку)
  • Обновлены библиотеки и добавлена новая
  • Удалены зависимости от некоторых сторонних библиотек
  • Множество других изменений
Для корректной работы проета требуется перекачать файлы проекта и и DLL библиотеки полностью заново.

51874
51875
51876
 
Последнее редактирование:

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.5.6
  • Добавлена возможность извлекать "почты", "ссылки", "мобильные номера" из описания каналов и видео во всех парсингах, как с АПИ так и без (теперь нет необходимости производить повторный парсинг каналов для на получение почты из описания, почта может быть извлечена во время парсинга данных видео или каналов и записана в отдельную колонку)
  • Добавлена опция "Не удалять прокси из списка"
  • Убран парсинг почт из описания канала в категории "Парсинг Email", так как теперь функция добавлена в парсинг данных видео и каналов
  • Изменёна логика присутствия email на канале в связи с последними изменениями в YouTube
  • Другие исправления
52433
52434
 

boragud

Пользователь
Регистрация
28.10.2010
Сообщения
71
Благодарностей
15
Баллы
8
Хочу поблагодарить за шаблоны.Так как я новичек в ютубе и сам в возрасте,то я недели две разбирался с настройками.Особенно не заморачивался с точной настройкой шаблонов-спарсил видео,залил на канал с ссылками на партнерку и все,на некоторых видео по15-30тыс. просмотров!!Шаблоны парсер и заливщик окупились за месяц и уже приносят прибыль!Поддержка на Высоте и всегда есть помощь!Еще раз огромное спасибо за Ваши шаблоны и помощь .
P.S.Новый парсер -бомба!
 
  • Спасибо
Реакции: Meteorburn

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.5.7
  • Добавлен парсинг трендов с эмуляцией стран (теперь есть возможность спарсить данные видео из трендов, получить все метаданные по ним и их позицию на странице трендов. 1 минута - 1 страна)
52608


Пример результатов: Посмотреть

52609

  • Убрана ячейка количество комментариев при парсинге данных видео без API (получить количество просмотров через данный парсинг временно нельзя и комментарии всегда записывались со значением "0")
 

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
В связи с новыми недавними ограничениями в YouTube на открытие почт из под кнопки ReCaptcha (открытие почт только с аккаунта и лимит 3 в день)
В YouTube-Parser есть отдельное приобретаемое решение работающее в связке с шаблоном позволяющее по прежнему собирать почты из под кнопки, подробнее узнавайте. Также есть возможность парсить почты на заказ.

53446
 
Последнее редактирование:

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser 3.5.8
  • Функция сбора Email из под кнопки ReCaptcha в разделе "О канале" вновь собирает почты посредством плагина к шаблону.
Теперь для сбора почт из под рекаптчи нужны Cookies YouTube в формате: Zp Profile, JSON или Net Scape
1 кука YouTube - 1-2 почты с канала в сутки.

Скорость парсинга через плагин (зависит от сервиса распознавания):
1 поток - 100 почт / 3 часа
10 потоков - 100 почт / 20 минут

Цена: 20$
Отдельно от YouTube-Parser приобрести нельзя.

53709


  • Теперь при парсинге данных каналов без API собирается данные "Подтверждён"
53707
 
Последнее редактирование:

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser v3.6
  • Функция "Скачивания видео" адаптирована под изменения в YouTube (видео и раньше скачивались без проблем, но некоторые видео скачать не удавалось, эти изменения теперь позволяют скачивать ранее недоступные видео)
  • Добавлена возможность скачивать видео в 360p, 480p, 720p, 1080p (раньше была возможность только в максимально качестве или 720p)
  • Добавлена возможность подключать cookies при парсинге данных без API, а также скачивании видео и копировании канала
Подключение cookies это ещё одна возможность на ровне с прокси обойти лимит запросов к YouTube при парсинге большого количества данных или видео без API. Это значит, что теперь с одного IP можно собирать или скачивать большое количество данных просто подключая файл с cookies, а не меняя IP.
Cookies поддерживаются только в формате .json из шаблонов YouTube-DorGen. Для этого требуется поместить файл кук в папку проекта и шаблон подхватит эти куки.
  • В функциях скачивания видео теперь учитывается User-Agent установленный в настройках
  • При парсинге данных канала без API теперь можно указать какое количество последних видео собирать с канала (раньше была возможность парсить все или только последнее загруженное видео)
  • При скачивании обложек видео, файл с обложкой не создаётся, если у видео нет обложки (сейчас скачиваются только загруженные автором обложки)
  • Исправлена ошибка сохранения таблицы из функции "Парсинг количества видео в выдаче"
  • Другие исправления касающиеся парсинга с API
 
Последнее редактирование:

Meteorburn

Client
Регистрация
23.05.2016
Сообщения
1 437
Благодарностей
563
Баллы
113
Обновление YouTube-Parser v3.6 [r2]
  • Добавлена возможность парсить наличие монетизации у чужих видео
Парсить монетизацию видео возможно только через парсинг данных видео без API. Аналог TubeSift только с большими возможностями по парсингу. Функция платная, но в течение месяца доступна для всех кто приобретал шаблон.
  • При копировании канала теперь можно указывать качество скачиваемого видео (360p, 480p, 720p, 1080p)
  • Категории видео при парсинге данных без API переведены на русский язык
  • При скачивании видео с названиями не на кириллице и не на латинице видео сохраняются с их оригинальными названиями
  • Изменены заголовки для резльутирующих таблиц на более понятные
  • Улучшена стабильность скачивания видео
  • Исправлен парсинг почт, ссылок, номеров из описания видео, если описания были пустыми
  • Удалена опция парсинга статистических данных у видео при парсинге поисковой выдачи (лайки, дизлайки, просмотры)
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)