Парсер similarweb

Shevassa

Client
Регистрация
24.01.2011
Сообщения
54
Благодарностей
30
Баллы
18
Ищу исполнителя, который сделает парсер similarweb по разделам конкуренты, входящий трафик и т.д, нужен только столбец с сайтами и всё объединить в одну таблицу. Платный аккаунт на время написанию шаблона предоставлю.
Загвоздка заключается в том, что если парсить данные со страницы, то из-за большого количества страниц пагинации с доменами парсинг займёт очень много времени, даже на запросах, а если выкачивать csv таблицы, то внутри таблицы много вкладок, нужно будет подключать библиотеку, которая перейдёт в нужную вкладку и заберёт только столбцы с доменами, а заметим объединит все выкачанные таблицы в одну.
 

Phoenix78

Client
Read only
Регистрация
06.11.2018
Сообщения
11 790
Благодарностей
5 690
Баллы
113
странно, я всегда думал что на запросах в 3000-5000 потоков парсинг идет как феррари на трассе :ca:
значит я ошибался :cg:
 

rastvl

Client
Команда форума
Регистрация
16.01.2019
Сообщения
656
Благодарностей
1 053
Баллы
93
Немного проблематично с симиляром работать из-за периметра. Он там достаточно параноидально настроен, поэтому если чуть превысишь допустимое количество запросов за определённый промежуток времени, то получишь капчу
 

Mikhail B.

Moderator
Регистрация
23.12.2014
Сообщения
14 328
Благодарностей
5 431
Баллы
113
Была же тема пару дней назад?
 

DevOps

Client
Регистрация
30.11.2020
Сообщения
496
Благодарностей
313
Баллы
63

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)