LSugg v.1 - парсер поисковых подсказок с более чем 25 поисковиков (Suggests Parser)

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113
Решился зарелизить свой парсер поисковых подсказок для доров, который я использую для генерации контента "в столбик".
LSugg v.1 - парсер поисковых подсказок (suggests parser). Парсинг производится с более чем 25 поисковиков (в данной версии - 26). Парсятся подсказки, которые появляются при начале набора запроса.


90% пользователей сети Интернет используют именно такие подсказки, чтобы не формулировать свои мысли до конца. Вы и сами наверняка замечали это за собой ;-) Именно такие ключевики очень удобны для того, чтобы делать по ним свои дорвеи (и не только). С них приходит больше трафика, чем если бы генерировать их самостоятельно (проверено).

Что умеет LSugg в данный момент:
  1. Кешировать результаты, когда выпарсит все возможные вариации заданного ключевика.
  2. Мультиязычный парсинг. Протестированные языки: en, de, it, fr, ru.
  3. Использование прокси.
  4. Как результат работы - выдает ключевики, разделенные любыми установленными символами. И выдает то количество, которое было установлено.
  5. Парсинг без использования браузера, на Get/Post - запросах.
  6. Парсинг каждого поисковика сделан на C# - поэтому скорость просто офигенная!
  7. Встроенная очистка от повторов.
  8. Все последующие обновления - бесплатные!

Сейчас - это встраиваемый шаблон куда угодно для зенки (в любых своих шабах его можно юзать). Парсинг всех поисковиков происходит менее чем за минуту, поэтому встраивание не замедлит весь ваш процесс.

Стоимость: 10 WMZ.
Оплата на кошелек: Z308109607942
Обязательно указывайте в примечании email, на который куплена зенка - именно на него будет привязан шаблон и туда я его отправлю.


Ограничения:
  • ZennoPoster >= 5.10.0.0, из-за использования встроенного парсинга json.
  • Привязка шаблона к email, на который зарегистрирован ZP.
  • Adult/porn и прочие тяжелые тематики очень плохо парсятся. Большинство поисковиков режут ответ по таким запросам, поэтому не стоит ожидать чуда.


Вопросы/ответы:
В: Зачем такое покупать? Я сделаю это сам.
О: Без проблем. Только стоит учесть, что базу в 26 поисковиков нужно где-то найти и распарсить результаты работы каждого (у меня это заняло 3 дня, но стоит учесть, что я там всё на C# делал - без него это гораздо сложнее будет и времени на это уйдет больше). Поэтому полностью согласен, что если сильно надо - то можно и самому запилить. Но нужно посчитать что дешевле будет - свое время потратить (а я, например, свое время очень дорого оцениваю) или купить уже готовую работу и сэкономить во времени + избежать кучи багов, которые в последствии могут вылезти (я тут о бесплатных апдейтах намекаю).

В: Зачем покупать, если есть базы типа моаба?
О: Потому что там куча мусора, который нужно ещё вычистить. Тут парсинг идет в реал-тайме и результаты можно сразу встраивать в работу своих доргенов.

В: Как пользоваться шабом?
О: Вместе с шабом будет подробная инструкция по его применению. По сути всё банально и просто, он будет использоваться у вас как кубик "проект в проекте", с передачей в него нескольких переменных и получением оттуда 1 переменной с результатом.

В: Как узнать что за поисковики используются в шаблоне?
О: Никак. Я не разглашаю эту информацию и запрещаю её распространять покупателям шаблона.

В: У меня нет ZP, но мне хотелось бы пользоваться этой штукой. Как?
О: Если предложите интересную реализацию и я её одобрю, то могу выпустить этот шаблон в формате ZennoBox (+ 10-15 WMZ комиссия за box и за работу). Предложить такую реализацию можно вот тут: https://vk.com/wall-43106145_320

В: Можно как-то предварительно посмотреть на результат работы шаба?
О: Да, вот результат для запроса "google" на английском языке: http://pastebin.com/FE2mJUqC
Если хотите проверить LSugg перед покупкой - пишите тут запрос и язык, я спаршу и выложу. Сделаю без проблем по 1-2 запроса на человека.
 
Последнее редактирование:
  • Спасибо
Реакции: orka13

AloneSlamer

Client
Регистрация
29.01.2013
Сообщения
1 404
Благодарностей
362
Баллы
83

Обращаем Ваше внимание на то, что данный пользователь заблокирован.
Не рекомендуем проводить с AloneSlamer какие-либо сделки.

Спарсишь резалты по моему запросу? если кеи норму будут куплю за 8$
 

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113
В личке попросили спарсить по запросу "free porn", вот собственно результат: http://pastebin.com/2C9EBdRJ - забавно, что несколько поисковиков поменяли porn на podcast и port )
Но всё равно, хоть 79 результатов спарсило, я думал там вообще ноль будет)
 

orka13

Client
Регистрация
07.05.2015
Сообщения
2 159
Благодарностей
2 159
Баллы
113
Сам шаблон закрыт от редактирования?
 

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113
Всем купившим - отправил на почту их версии.
Думаю, в течении месяца запилю ещё несколько поисковиков. Но что-то их уже почти не осталось)
 

kxk

Client
Регистрация
20.05.2011
Сообщения
260
Благодарностей
27
Баллы
28

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113

investman

Client
Регистрация
27.02.2016
Сообщения
167
Благодарностей
26
Баллы
28

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113
Еще актуально?
Что по поводу обновления?
Конечно актуально - я не перестал продавать шаблон :-)

Обновления - бесплатные. Сейчас уже по сути там добавлен ещё один поисковик, но просто ради одного не хотелось версию менять и писать везде)

Как захотите купить - перечисляйте деньги на указанный кошелек, мне приходит уведомление на почту - и я сразу же (если перед компом, а я перед ним обычно по 10-15 часов в сутки) отправляю его.
 

investman

Client
Регистрация
27.02.2016
Сообщения
167
Благодарностей
26
Баллы
28
Конечно актуально - я не перестал продавать шаблон :-)

Обновления - бесплатные. Сейчас уже по сути там добавлен ещё один поисковик, но просто ради одного не хотелось версию менять и писать везде)

Как захотите купить - перечисляйте деньги на указанный кошелек, мне приходит уведомление на почту - и я сразу же (если перед компом, а я перед ним обычно по 10-15 часов в сутки) отправляю его.
Оплатил: почта sa******[email protected]
 

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113
Обновление шаблона до версии LSugg v.1.1


  • добавлен шаблон lsugg_parser - самая простая реализация многопоточного парсера поисковых подсказок
  • добавлен ещё один парсер, теперь их 27
  • добавлена переменная is_cached

Самое интересное, конечно, это шаблон lsugg_parser - это именно то, что многие просили (чтобы самостоятельно не делать парсинг всех запросов в один файл).

Вот как выглядит шаблон lsugg_parser:


Думаю, по кубикам и описанию уже можно догадаться примерно как он работает и в том, что он многопоточный и без использования браузера.

Для тех, кто купил LSugg ранее - высланы обновления.

Документация обновлена, там всё написано как работает lsugg_parser.
 

one

Client
Регистрация
22.09.2015
Сообщения
6 790
Благодарностей
1 264
Баллы
113
А как парсер выглядит? :-)
 
  • Спасибо
Реакции: Sergodjan

Sergodjan

Administrator
Команда форума
Регистрация
05.09.2012
Сообщения
19 362
Благодарностей
8 648
Баллы
113
А как парсер выглядит? :-)
мне тоже это интересно.. :-)
картинка с главным проектом не представляет интереса..
можно было не показывать..

но это все придирки..
наверное достойный продукт,
купил бы, если бы без прокси можно было использовать и проект открыт был..
 
Последнее редактирование:

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113
А как парсер выглядит? :-)
Как шаблон, который используешь у себя как кубик "Проект в проекте".
А то что внутри - ну сам посуди, зачем мне выкладывать это?)
 

kxk

Client
Регистрация
20.05.2011
Сообщения
260
Благодарностей
27
Баллы
28
Ты молодец, а меж тем бурж начинает меня приятно лакомить, приступаю к дальнейшему увеличению сетки доров:-)
 

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113
Ты молодец, а меж тем бурж начинает меня приятно лакомить, приступаю к дальнейшему увеличению сетки доров:-)
Спасибо за отзыв) Надеюсь, с новым шаблоном-парсером будет легче )
 

one

Client
Регистрация
22.09.2015
Сообщения
6 790
Благодарностей
1 264
Баллы
113

investman

Client
Регистрация
27.02.2016
Сообщения
167
Благодарностей
26
Баллы
28
Кипил. Шустрый парсер. Еще бы прикрутить к нему фильтр, который будет убирать мусор - "стоп слова" :-)
И что еще важно - это адаптировать его под 5.9 версию Zennoposter, т.к. версии 5.10 с багами и большинство пользуется версиями ниже. Мне приходится специально под парсер постоянно менять 5.9 на 5.10 и обратно....очень не удобно
 
  • Спасибо
Реакции: Lord_Alfred

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113
Кипил. Шустрый парсер. Еще бы прикрутить к нему фильтр, который будет убирать мусор - "стоп слова" :-)
И что еще важно - это адаптировать его под 5.9 версию Zennoposter, т.к. версии 5.10 с багами и большинство пользуется версиями ниже. Мне приходится специально под парсер постоянно менять 5.9 на 5.10 и обратно....очень не удобно
Стоп-слова - хорошая идея, спасибо. Я подумаю как это реализовать и внедрить в парсер.

Работа в 5.9 не возможна только из-за того, что используется встроенный в 5.10 парсер JSON. Если будет достаточное количество желающих, кто сидит на версии 5.9 - то я постараюсь внедрить какой-нибудь сторонний парсер JSON, чтобы LSugg работал и там.
 
  • Спасибо
Реакции: Sergodjan

investman

Client
Регистрация
27.02.2016
Сообщения
167
Благодарностей
26
Баллы
28
... "Если будет достаточное количество желающих, кто сидит на версии 5.9 - то я постараюсь внедрить какой-нибудь сторонний парсер JSON, чтобы LSugg работал и там".
Было бы очень замечательно! Ждем голосование желающих, а рассылка писем на email ускорит процесс :-)
 

xoffer

Client
Регистрация
27.01.2011
Сообщения
88
Благодарностей
7
Баллы
8
Тоже сижу на 5.9 , будет парсер под 5.9 сразу куплю). Пиши как сделаешь.
 
Регистрация
27.05.2015
Сообщения
129
Благодарностей
45
Баллы
28
Парсер фильтрует автогенерированные подсказки? Т.е. подсказки с несуществующими запросами, а дополненные поисковиком. В Яндексе такие точно можно фильтровать(JSON ответ нужно смотреть).
 

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113
Парсер фильтрует автогенерированные подсказки? Т.е. подсказки с несуществующими запросами, а дополненные поисковиком. В Яндексе такие точно можно фильтровать(JSON ответ нужно смотреть).
К сожалению, кроме яндекса из тех поисковиков что есть - никто это не поддерживает. Поэтому писать под один яндекс не было смысла.
 

Andrey Fox

Новичок
Регистрация
02.01.2017
Сообщения
16
Благодарностей
2
Баллы
3

Lord_Alfred

Client
Регистрация
09.10.2015
Сообщения
3 916
Благодарностей
3 852
Баллы
113

Andrey Fox

Новичок
Регистрация
02.01.2017
Сообщения
16
Благодарностей
2
Баллы
3

Viktor111

Client
Регистрация
02.07.2015
Сообщения
16
Благодарностей
5
Баллы
3
Вчера приобрел шаблон, всю ночь парсил подсказки. Результат парсинга меня впечатлил. Всем рекомендую.
 
  • Спасибо
Реакции: Lord_Alfred

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)