++++ { "ZD4 - генератор Дорвеев/Картинок. Тесты" ❤ / ❤ Установка "Под ключ" 249$ } ++++

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
Всех с Наступающими Рождественскими Праздниками! :dh:

Парни, как и обещал в одном из своих сообщений. Выкладываю релиз Z-Dorgen после 3-х месячного тестирования (тестировали парни с приватных веток (20+ человек) других форумов, в частности выражаю огромную Благодарность Сергею http://zennolab.com/discussion/members/sergodjan66.4244/ за его активное участие в проекте).

Долго думал с чего начать, но наверное пока не опишу технических деталей и уже написанных макросов - будет не совсем понятно (примеры живых дорвеев приведу чуть позже, пока предоставлю скриншоты НЕ рандомизированных шаблонов. рандомизация тестируется, как РУ, так и Бурж, примеры простых шаблонов см. в конце).

Давайте попробуем все-таки начать с технической части.

Z-Dorgen
- работает с переменными, собранными из поисковых систем и сервисов: Подсказки, Картинки, Заголовки, Сниппеты, Видео, а также с текстовыми файлами и строками.
С каждым дорвеем работа ведется в 1 поток, но можете использовать 5-10 потоков для генерации сразу 5-10 сайтов, при этом кол-во заданий должно быть соответствующим.
Капчу поисковики не просят, а значит Вы можете работать без дополнительных затрат.

========================
++ Структура Z-Dorgen ++ (стараюсь все делать по минимуму и удобству)
========================

+ Каталог /doorways/* - здесь сохраняются ваши дорвеи site.ru/*

+ Каталог /templates/* - содержит шаблон сайта, при генерации полностью копируется в doorways/site.ru/* включая всю внутреннюю структуру папок и файлов.
текущий шаблон основан на компонентах bootstrap, что существенно упрощает работу с элементами страницы.
Вы также можете использовать любой другой шаблон, не обязательно использовать именно bootstrap, подойдет абсолютно любая структура, вплоть до 1-ого макроса.

/templates/template.html - основа шаблона, используется для формирования страницы дорвея с использованием макросов доргена (см. ниже "Макросы").

+ Каталог /spam/* - содержит сгенерированные файлы спам-ссылок дорвеев: urls.txt, links.txt, bbcodes.txt, ping.txt

http://site.ru/download/3-informatika-9.html
http://site.ru/download/4-skachat-filmy-besplatno.html

<a href="http://site.ru/download/3-informatika-9.html">Информатика 9</a>
<a href="http://site.ru/download/4-skachat-filmy-besplatno.html">Скачать фильмы бесплатно</a>

Информатика 9
Скачать фильмы бесплатно (теги BB-code)

http://site.ru/download/3-informatika-9.html|||Информатика 9
http://site.ru/download/4-skachat-filmy-besplatno.html|||Скачать фильмы бесплатно

+ Каталог /files/* - здесь расположены текстовые файлы (любое кол-во, любые наименования, размер файла примерно соответствует размеру статьи 1-8K символов, хотя можно значительно больше).
если в настройках доргена включена соответствующая галочка "Работа с файлами" - дорген возьмет случайный файл из данной папки и сохранит его в макрос {-Variable.file-}, который можно использовать в шаблоне. используется рандомный файл для каждой страницы, файл при этом не удаляется (можем рассмотреть вариант с удалением).
будет полезен тем, кто хочет дополнительно выводить текстовые блоки на странице, помимо сниппетов, тайтлов, подсказок (если не используете, лучше отключить опцию).

+ Каталог /txt/* - здесь расположены текстовые файлы (любое кол-во, любые наименования, файлы должны содержать минимум от 10 строк, т.к для их работы задействованы 10 макросов).
если в настройках доргена включена соответствующая галочка "Работа со строками" - дорген возьмет случайный файл из данной папки, перемешает строки и возьмет первые 10 для работы.
допускается одновременное использование до 10 макросов на странице, вида:
{-Variable.txt0-} ... {-Variable.txt9-}
файлы и строки при этом не удаляются (можем рассмотреть вариант с удалением).
будет полезен тем, кто хочет дополнительно выводить, например, такие данные: каменты пользователей, случайные предложения/высказывания/ключи... и т.п (если не используете, лучше отключить опцию).

+ Файл catalog.txt - содержит список каталогов дорвея, например:
download
torrent
hd-tv
avi-files

+ Файл format.txt - содержит формат вывода страниц, например:
download-{-Variable.i-}
{-Variable.i-}-{-Variable.keylink-}
{-Variable.i-}
{-Variable.keylink-}

(форматы используются как для режима "папка-ключ" так и для обычных форматов страниц .html .php)

каждая новая страница дорвея будет создаваться в случайном каталоге (кол-во каталогов зависит от настроек) со своим i-индексом (кроме главной, там идет отдельный алгоритм).
/doorways/site.ru/download/6-rabochaia-tetrad-6-klass.html

+ Файл keywords.txt - содержит ключи для дорвеев. для каждого дорвея из данного файла возьмется N-ключей необходимых для генерации. потом произведется их чистка на плохие символы.
если кол-во ключей < заданного в настройках доргена - выдаст предупреждение и остановит работу (советую использовать пару сотен ключей/на дорвей, а после успешных генераций уже ставить большее кол-во).

+ Каталог /log/* - содержит логи генерации по каждому из дорвеев отдельно. ошибки по каждому потоку - вынесены в error.txt

Пример генерации лога (отображается как в файле, так и в логах зеннопостер):

[12/17/2016 13:43:00][site.ru] Генерация сайта запущена! N стр.
[12/17/2016 13:43:17][site.ru][1][essay about my future house] Спарсили подсказки [10].
[12/17/2016 13:43:21][site.ru][1][essay about my future house] Спарсили [1 блок] сниппетов [10].
[12/17/2016 13:43:22][site.ru][1][essay about my future house] Спарсили [1 блок] заголовков сниппетов [10].
[12/17/2016 13:43:26][site.ru][1][essay about my future house] Спарсили [2 блок] сниппетов [10].
[12/17/2016 13:43:27][site.ru][1][essay about my future house] Спарсили [2 блок] заголовков сниппетов [10].
[12/17/2016 13:43:31][site.ru][1][essay about my future house] Спарсили картинки [30].
[12/17/2016 13:43:33][site.ru][1][essay about my future house] Спарсили видео [9].
[12/17/2016 13:43:44][site.ru][2][writing a science research paper for middle school] Спарсили подсказки [15].
[12/17/2016 13:43:48][site.ru][2][writing a science research paper for middle school] Спарсили [1 блок] сниппетов [10].
[12/17/2016 13:43:50][site.ru][2][writing a science research paper for middle school] Спарсили [1 блок] заголовков сниппетов [10].
[12/17/2016 13:43:53][site.ru][2][writing a science research paper for middle school] Спарсили [2 блок] сниппетов [10].
[12/17/2016 13:43:55][site.ru][2][writing a science research paper for middle school] Спарсили [2 блок] заголовков сниппетов [10].
[12/17/2016 13:43:59][site.ru][2][writing a science research paper for middle school] Спарсили картинки [28].
[12/17/2016 13:44:04][site.ru][2][writing a science research paper for middle school] Спарсили видео [10].
....

+ Файл sitemap.txt - содержит заглушку для начала карты sitemap.xml (работает макрос {-Variable.site-})

<?xml version="1.0" encoding="utf-8"?>
<urlset xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.sitemaps.org/schemas/sitemap/0.9 http://www.sitemaps.org/schemas/sitemap/0.9/sitemap.xsd" xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>http://{-Variable.site-}/</loc>
<changefreq>daily</changefreq>
</url>

+ Файл url.txt - содержит заглушку для сформированных страниц дорвея, обрабатываемые макросы приведены ниже (можно корректировать месяц, год, приоритеты):

<url>
<loc>http://{-Variable.site-}/{-Variable.catalog-}/{-Variable.ft_page-}{-Variable.ft-}</loc>
<lastmod>2016-11-{-Variable.day-}</lastmod>
<changefreq>always</changefreq>
<priority>1.0</priority>
</url>

+ Файл sites.txt - содержит список дорвеев, которые подготовлены к генерации (берутся с удалением, формат site.ru)

+ Файл useragents.txt - содержит список User-Agents для GET-запросов к поисковикам и сервисам.
Теперь используется языковая переменная, все подставляется автоматом из внешних Настроек! :-)

Mozilla/5.0 (Windows; U; Windows NT 6.1; {-Variable.l-}) AppleWebKit/534.8 (KHTML, like Gecko) Chrome/7.0.521.0 Safari/534.8
Mozilla/5.0 (Windows; U; Windows NT 6.2; {-Variable.l-}) AppleWebKit/534.10 (KHTML, like Gecko) Chrome/8.0.552.224 Safari/534.10
Mozilla/5.0 (Windows; U; Windows NT 6.2; {-Variable.l-}) AppleWebKit/534.6 (KHTML, like Gecko) Chrome/7.0.503.0 Safari/534.6

======================
++ Макросы Z-Dorgen ++
======================

{-Variable.site-}
(обрабатывается в файлах: .htaccess, sitemap.txt, url.txt, robots.txt);

Макросы, обрабатываемые в template.html:

{текст1|текст2|текст3}
- поддержка Spintax (при использовании включить во внешних Настройках. css/js - выносить во внешние файлы, иначе может обрезать код);

{-Variable.key-} // ключ текущей страницы; для базового забора ключей для дорвеев - используется файл keywords.txt;

{-Variable.keylink-} // ключ транслит с дефисами (для формирования имен страниц "skachat-filmy-besplatno" или режима "папка-ключ");

{-Variable.tags-} // ключ текущей страницы, разделенный запятыми;

{-Variable.day-} // для вывода дней в карте (совпадает с днем публикации новости. пока по умолчанию 10-30);

{-Variable.rating-} // рейтинг для звездочек в сниппетах Гугла, по умолчанию 4.6-4.9;

{-Variable.views-} // кол-во просмотров статьи 500-1000;

{-Variable.catalog-} // текущий каталог, используется файл catalog.txt;

{-Variable.i-} // нумерация страниц, генерируется на основании рандомного кол-ва страниц взятого от и до, из внешних Настроек;

{-Variable.ft-} // формат страниц (html, php, csv, txt, xml), дополню нужными при необходимости. в режиме "папка-ключ" равен null;
(кто-то уже парсит данные под свои площадки, блоги, платформы, сервисы)

{-Variable.file-} // данные из случайных файлов files/* описание см. выше, при использовании - установить галочку во внешних Настройках;

{-Variable.image0-} // картинки с Яндекс/Сайтов (добор по мере нехватки). при использовании - установить галочку во внешних Настройках;
- При парсинге с Яндекс устанавливаются хотлинки непосредственно с Яндекс;
- При парсинге с Рамблер - забираем хотлинки с чужих сайтов;
{-Variable.image0-} ... {-Variable.image24-}

{-Variable.video0-}
// видео с YouTube. при использовании - установить галочку во внешних Настройках;
{-Variable.video0-} ... {-Variable.video4-}

{-Variable.snippets1-}
// блоки сниппетов (каждый блок наполняется сниппетами Sputnik c 1-10/11-20 или Bing 1-20/21-40, зависит от внешних Настроек / также возможен вариант Sputnik + Bing).
- в Бинг идет регулирование по кол-ву сниппетов (до 100 на страницу выдачи);
при использовании - установить галочку во внешних Настройках, на нужные блоки и поисковики;
{-Variable.snippets1-}, {-Variable.snippets2-}

{-Variable.title0-}
// заголовки сниппетов. при использовании - установить галочку во внешних Настройках, на нужные блоки;
{-Variable.title1_0-} ... {-Variable.title1_9-}
{-Variable.title2_0-} ... {-Variable.title2_9-}

{-Variable.snippet0-}
// сниппеты. при использовании - установить галочку во внешних Настройках, на нужные блоки;
{-Variable.snippet1_0-} ... {-Variable.snippet1_9-}
{-Variable.snippet2_0-} ... {-Variable.snippet2_9-}

{-Variable.txt0-}
// строки из случайных файлов txt/* описание см. выше, при использовании - установить галочку во внешних Настройках;
{-Variable.txt0-} ... {-Variable.txt9-}

{-Variable.tds-}
// макрос для слива по внешней ссылке через закрытый каталог /go (можно использовать передачу ключа через параметр ?q={-Variable.key-});
для удобства вынесено во внешние Настройки. при использовании включить режим PHP-генерации.

{-Variable.suggest0-} // подсказки по текущему ключу (добор по мере нехватки). при использовании - установить галочку во внешних Настройках;
{-Variable.suggest0-} ... {-Variable.suggest9-}

РУ-подсказки = Яндекс+Mail
EN-подсказки = Yahoo+Ask

{-Variable.link-}
// макрос для вывода перелинковки "Кольцом" (на каждой странице расположена предыдущая сгенерированная ссылка, кроме главной);
при использовании - установить галочку Перелинковка "Кольцо" во внешних Настройках.

{-Variable.link0-} // макросы для вывода обычной перелинковки, не повторяются в пределах страницы. при использовании - снять галочку Перелинковка "Кольцо" во внешних Настройках;
Макросы начинают работу с 50 страницы:
{-Variable.link0-} ... {-Variable.link14-}

===========================
++ Формирование макросов ++
===========================

Формирование макросов для сниппетов, тайтлов и текстовых блоков разделено на 2 GET-запроса (опционально);
(сбор может происходить с 2-х страниц, по каждому из блоков):

1 запрос парсит с 1-10 сниппет, 2 запрос парсит с 11-20 сниппет (любой запрос по каждому из поисковиков можно отключить, если не используется).
Лучше использовать: Спутник - 10 сниппетов, Бинг - 20 сниппетов (регулируется до 100, при условии использования 1-ого блока, до 50 - 2-х блоков).

Сниппеты 1 (+блок) - включает макросы отдельных сниппетов для 1-ого GET-запроса:
{-Variable.snippet1_0-} ... {-Variable.snippet1_9-}
а также формирует текстовый блок {-Variable.snippets1-}

Сниппеты 2 (+блок)
- включает макросы отдельных сниппетов для 2-ого GET-запроса:
{-Variable.snippet2_0-} ... {-Variable.snippet2_9-}
а также формирует текстовый блок {-Variable.snippets2-}

Заголовки сниппетов 1
- включает макросы заголовков сниппетов для 1-ого GET-запроса:
{-Variable.title1_0-} ... {-Variable.title1_9-}

Заголовки сниппетов 2
- включает макросы заголовков сниппетов для 2-ого GET-запроса:
{-Variable.title2_0-} ... {-Variable.title2_9-}

Дорген отправляет GET-запрос в поисковик один раз по каждому блоку данных (если он включен).

*****
Примеры 1-ого GET-запроса (по одному из поисковиков):

- Если включены Заголовки сниппетов 1, но отключены Сниппеты 1 (сформирует только макросы Заголовков сниппетов 1).
- Если включены Заголовки сниппетов 1, а также Сниппеты 1 (сформирует макросы Заголовков сниппетов 1, самих Сниппетов 1 + Текстовый блок 1).
- Если включены Заголовки сниппетов 2, но отключены Сниппеты 2 (сформирует только макросы Заголовков сниппетов 2).
- Если включены Заголовки сниппетов 2, а также Сниппеты 2 (сформирует макросы Заголовков сниппетов 2, самих Сниппетов 2 + Текстовый блок 2).
- Если включены только Сниппеты 1 (сформирует макросы самих Сниппетов 1 + Текстовый блок 1).
- Если включены только Сниппеты 2 (сформирует макросы самих Сниппетов 2 + Текстовый блок 2).

*****
Примеры 2-х GET-запросов (по одному из поисковиков):

- Если включены Заголовки сниппетов 1, а также Сниппеты 2 (сформирует макросы Заголовков сниппетов 1, самих Сниппетов 2 + Текстовый блок 2).
- Если включены Заголовки сниппетов 2, а также Сниппеты 1 (сформирует макросы Заголовков сниппетов 2, самих Сниппетов 1 + Текстовый блок 1).
- Если включены Заголовки сниппетов 1/2 (сформирует макросы Заголовков сниппетов 1/2).
- Если включены Сниппеты 1/2 (сформирует макросы самих Сниппетов 1/2 + Текстовые блоки 1/2).

Все это сделано, чтобы не отправлять повторных запросов, когда данные уже собраны для генерации страницы.

=======================================================
++ Примеры стандартных НЕ рандомизированных шаблонов ++
(сейчас работаю над случайным выводом контента, в рамках данного шаблона - его предоставляю бесплатно всем купившим, для оценки и представления работы)
=======================================================

Можно увеличивать размеры (привел в полный экран для удобства просмотра):

http://radikal.ru/big/wgp6lgcfocdq6
http://radikal.ru/big/6t78hybyp0pb2
http://radikal.ru/big/qtwess9vos39i
http://radikal.ru/big/9l9p88rd9xc9d
http://radikal.ru/big/puicqji5gpstj
http://radikal.ru/big/2hn7vikptlhqq
http://radikal.ru/big/c6ae0kud0ox5i
http://radikal.ru/big/pvjnm186rqpra

Ну и, пожалуй, приведу пару примеров клиента, кто работает на моем доргене:
(мне очень понравилось. тематика Одежда)

http://image.prntscr.com/image/c84c8434e33340b7b857d2d58ce844b1.png
http://image.prntscr.com/image/170f7640ba124348b2d50e79ee90ee55.png

Если кого-то заинтересовало, приведу в пример текстовку по Вашим личным ключам (обращайтесь в ЛС, пожалуйста).

Ну и самое главное, насчет цен:
- 3тр (включая шаблоны случайного вывода контента посредством spintax РУ+БУРЖ)

Думаю, многим сойдет за каркасную основу их Доргена, т.к практически все учтено, ну а тем кто не хочет писать сам - буду постепенно дописывать самостоятельно по мере личностного развития и свободного времени :-) Кстати, как выяснили на тестах, версия 5.9.9.1 немного мудрит с YouTube - для потенциальных клиентов, просьба предусмотреть.

(к оплате принимаются: visa, сбербанк, wmr, wmz, qiwi, я.д)
Обращаться в личку, либо по контактам в Профиле.

Шаблон идет открытым кодом на редактирование, т.к понимаю, многие доработают под себя (для возможности рассмотрения и внедрения дополнительного функционала).

Если кто из клиентов желает помочь в развитии доргена - буду искренне рад! :-)

Контакты (Дмитрий Сергеевич)
skype: live:.cid.88da8b568e59e13e

ОТЗЫВЫ:
http://zennolab.com/discussion/threads/z-dorgen-generator-dorveev-na-zennoposter-2t-r-35-luchshee-ljudjam-update.34053/page-6#post-272159

http://zennolab.com/discussion/threads/z-dorgen-generator-dorveev-na-zennoposter-2t-r-35-luchshee-ljudjam-update.34053/page-6#post-272172

http://zennolab.com/discussion/threads/z-dorgen-generator-dorveev-na-zennoposter-2500r-45-konkurs-nabor-uchastnikov.34053/page-9#post-289818

http://zennolab.com/discussion/threads/z-dorgen-generator-dorveev-na-zennoposter-2500r-45-konkurs-nabor-uchastnikov.34053/page-9#post-289841

http://zennolab.com/discussion/threads/z-dorgen-generator-dorveev-na-zennoposter-2500r-45-konkurs-nabor-uchastnikov.34053/page-9#post-291609

Интересна кому-либо из клиентов Настройка Z-Dorgen "Под Ключ"?

1. свежая версия Z-Dorgen (если уже купили, вычетаем 3тр из общей цены);
2. грамотная настройка Доргена по TeamViewer, максимальный подгон параметров под вашу схему + помощь/разбор полетов;
3. грамотный шаблон, сидит от 3 месяцев (теперь идет отдельно +2тр);
4. сбор ключей под Вас - есть Бурж/РУ базы;
5. установка/настройка TDS под вашу схему - использовать будем http://ztds.info
6. инсталляция VPS/ISP-панели (я беру здесь https://www.hetzner.de/hosting/produktmatrix_vserver/vserver-produktmatrix от 4.7 Евро/месяц);
7. иные вопросы для обсуждения...
(сроки исполнения до 3х дней)

Все опционально - на договорной основе (выбираете пункты - согласовываем с Вами, постараюсь быть тактичен по ценам к каждому)...

Буду рад оказать грамотную техническую помощь специалиста! ;-)

За покупкой/настройкой Z-Dorgen пишите в личку, либо
skype: live:.cid.88da8b568e59e13e

--------------------

Парни, погоняю ссылки своим индексатором, кому интересно.
(с меня не убудет, а дополнительные средства и вложения в дорвеи не помешают)

Прокси + сервер = мои.

Индекс через 1-2 часа.
 
Последнее редактирование:

S10n4eg

Client
Регистрация
25.06.2014
Сообщения
138
Благодарностей
19
Баллы
18
А сколько генерируется 1 дорвей на 5к страниц по времени?
 

daymos

Client
Регистрация
11.11.2009
Сообщения
790
Благодарностей
225
Баллы
43
по стате не понятно. Покажите кривую трафа.
 

Nord

Client
Регистрация
22.03.2012
Сообщения
2 067
Благодарностей
1 084
Баллы
113
Такой себе рэд батон для зенки =)
Дорген — это третий шаблон, который должен каждый сделать после реги меилру и накрутки буксов =)
Насчет статы - ботов ПС не отсеивали?

У меня, конечно не такой модный шаблон, но вот чего можно за год добиться помозговав пару недель




Удачи!
ПС Еще не плохо было б заливалку на хостинг и аддурилку гугла прикрутить

Про ботов спросил, потому что в этой стате почти 30 к трафика - боты ПС
 

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
А сколько генерируется 1 дорвей на 5к страниц по времени?
Практически при всех включенных настройках (кроме Подсказок), затраченное время для генерации 100 страниц = 12 минут. в 1 поток, при скорости 20 мбит/сек.



Лог https://www.dropbox.com/s/fz3pzhk0u9nqfzd/zennolab.com_test.txt
 
Последнее редактирование:

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
по стате не понятно. Покажите кривую трафа.
счетчиков на дорвеях не стоит.

но если интересует с ПП то вот:



Насчет статы - ботов ПС не отсеивали?

У меня, конечно не такой модный шаблон, но вот чего можно за год добиться помозговав пару недель
Удачи!

ПС Еще не плохо было б заливалку на хостинг и аддурилку гугла прикрутить
Про ботов спросил, потому что в этой стате почти 30 к трафика - боты ПС
Насчет аддурл, использую seadd.net, пинг-софт использую Владимира http://vladimir-awm.ru/drugie-skripty/mass-proksi-pingovalka-v-2/
(порой дорвеи прогоняются по нескольку раз - вижу только плюсы пока).
 
Последнее редактирование:
  • Спасибо
Реакции: teodocomo

backoff

Client
Регистрация
20.04.2015
Сообщения
3 896
Благодарностей
2 715
Баллы
113
сколько ip нужно для нормальной генерации сайта на 3к страниц в 1 поток, ну я про капчи, часто ли выскакивают?
какая нагрузка при 20 потоках примерно?
 

backoff

Client
Регистрация
20.04.2015
Сообщения
3 896
Благодарностей
2 715
Баллы
113
У меня, конечно не такой модный шаблон, но вот чего можно за год добиться помозговав пару недель
сколько доров всего было, по сколько страниц примерно?
 

one

Client
Регистрация
22.09.2015
Сообщения
5 566
Благодарностей
950
Баллы
113
Про ботов спросил, потому что в этой стате почти 30 к трафика - боты ПС
46к минус 30к... Хммм... Денег... Не хочешь мне в ЛС что нибудь интересного рассказать? ;-) :D
 

Nord

Client
Регистрация
22.03.2012
Сообщения
2 067
Благодарностей
1 084
Баллы
113
сколько доров всего было, по сколько страниц примерно?
Сколько отдельных доров не помню. В сумме около 200к страниц. По 500-2к страниц на один. Всего шаблон работал около 10 дней, пока были прокси.
Потом забил, файлы с урлами скосил, так как трафик не шел. Месяца через 3 заглянул на партнерку и увидел, что траф идет, и заказы бывают. Теперь просто наблюдаю.
Судя по небольшому списку урлов, который делал для аддурилки и забыл удалить, процентов 80 скосили давно. С остальных капает.
46к минус 30к... Хммм... Денег... Не хочешь мне в ЛС что нибудь интересного рассказать? ;-) :D
Дак тут копейки, по сравнению с остальными форумчанами. Тут то квартиры покупают, то майнят на видюхах по 20к баксов в месяц, то краны доят чуть ли ни по килобаксу в день=)

Как я давно понял, главное найти грань - сделаешь мало — будет совесть мучать, что нужно было еще, сделаешь дохрена — снесут все разом, и ни копейки ни получишь
 

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
сколько ip нужно для нормальной генерации сайта на 3к страниц в 1 поток, ну я про капчи, часто ли выскакивают?
какая нагрузка при 20 потоках примерно?
Добрый день, я использую 1 IP на формирование небольшой пачки дорвеев (IP динамика, провайдер Ростелеком).
Ни одной капчи пока поймано не было. Собственно, почему и использую данные ПС, сервисы (но для перестраховки, конечно же лучше сменить IP на новой пачке).

Дорвеи генерирую от 1-2K страниц. На одну пачку порядка 20 штук, в 10 потоков.
(нагрузку в 20 потоков пока не тестировал)

Многое также зависит от сформированного шаблона, я хоть и предлагаю вполне готовое решение, но постоянно ищу другие вариации шаблона, которые приведут к более ощутимому индексу/трафику и при этом будут парсить минимальное кол-во данных. На текущий момент веду тестирование шаблона с рандомизированным выводом данных.

Nord, верно. больше сделаешь - результаты заметно лучше. но начинать нужно всегда с малого/середнячка, чтобы проверить нишу, ключи, шаблон, вхождение в индекс, вылеты, усидчивость в топах и прочие детали. тоже порядочно времени уходит на тесты ;-)

backoff, отписал по вопросам в ЛС. Также продублирую индексы пары пачек здесь (периодически экспериментирую с шаблонами):

Пачка заливалась в конце Декабря


А эта пачка с конца Ноября (как видно из индекса, какие-то хорошо вылезли)
Эта пачка была частично 4-5K / 1-2K страниц.
 
Последнее редактирование:

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
popobawa, на самом деле все довольно просто. но упирается, как всегда, в детали: грамотно подобранный фрихост/дроп/домен, либо хорошо спроектированный html-шаблон, который полюбит Гугл или другой поисковик (ведь ни для кого не секрет, что "свежие" домены, либо домены без траста могут вовсе не держаться в выдаче, по сравнению с теми же трастовыми фрихостами. на это тоже нужно обратить внимание).

Z-Dorgen по своей сути, лишь конструктор из различного набора данных, собранных через интернет (с возможностью использовать свои текстовые документы, статьи, строки из файлов).

на текущий момент я предлагаю лишь вариант, для понимания - какой шаблон можно использовать и как рандомизировать данные, основанный на bootstrap - кстати, так делают многие разработчики доргенов, и я не исключение :-)

Для оценки рандомизации можете взглянуть на пример дорвея (сгенерировал по просьбе форумчан):
https://www.dropbox.com/s/o59evnuofrfr8ex/site.ru.rar?dl=1

Буду рад новым клиентам. Для ориентировки общения на форуме/skype - MSK+4 часа.
 
Последнее редактирование:

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
Парни, дополню... поступил вопрос - "Но ведь шаблон открыт, можем купить на нескольких человек?"

Впервые с таким сталкиваюсь - честно говоря, в небольшом шоке даже :-)
Лицензия выписывается на 1 железо 1 привязки. Не думал, что будут подобные инциденты (но прошу учесть).
Редактируйте, на ваше усмотрение, но никак не на 100500+ членов форума.
 
Последнее редактирование:
  • Спасибо
Реакции: Radzhab

Nord

Client
Регистрация
22.03.2012
Сообщения
2 067
Благодарностей
1 084
Баллы
113
Парни, дополню... поступил вопрос - "Но ведь шаблон открыт, можем купить на нескольких человек?"

Впервые с таким сталкиваюсь - честно говоря, в небольшом шоке даже :-)
Лицензия выписывается на 1 железо 1 привязки. Не думал, что будут подобные инциденты (но прошу учесть).
Дак если он открыт, то его же можно просто скопировать.
 

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
открыт только на редактирование. никто не говорил о Полном доступе, иначе в доргене и его продажах не было бы никакого смысла.

 

Nord

Client
Регистрация
22.03.2012
Сообщения
2 067
Благодарностей
1 084
Баллы
113
Не хочу развивать оффтоп, но скинте любой шаблон( не этот) с разрешением только на редактирование, попробую. Раньше все отлично копировалось
 

doc

Client
Регистрация
30.03.2012
Сообщения
7 851
Благодарностей
3 929
Баллы
113
можно редактировать - значит и воссоздать можно
 

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
doc, спасибо за комментарий и поправку. если действительно увод скрипта не исключен - предпочту закрытый код.

Хотя тут скорее палка о двух концах - либо есть возможность корректировки под себя, с возможностью копирования (чего не исключаю), либо нет возможности корректирования, но есть жесткий момент привязки.
 
Последнее редактирование:

doc

Client
Регистрация
30.03.2012
Сообщения
7 851
Благодарностей
3 929
Баллы
113
doc, спасибо за комментарий и поправку. если действительно увод скрипта не исключен - предпочту закрытый код (продаж на текущий момент не было, но сами понимаете - лишний повод не есть хорошо).

Хотя тут скорее палка о двух концах - либо есть возможность корректировки под себя, но есть возможность копирования (что не исключаю), либо нет возможности корректирования, но есть жесткий момент привязки.
одно без другого не бывает
 

Nord

Client
Регистрация
22.03.2012
Сообщения
2 067
Благодарностей
1 084
Баллы
113
Копировать можно даже без права на изменение,только при чтении, иногда проскакивает глюк при открытии шаблона
 

backoff

Client
Регистрация
20.04.2015
Сообщения
3 896
Благодарностей
2 715
Баллы
113
можно редактировать - значит и воссоздать можно
думаю, что согласен.

НО скажу от себя, я давно в нете, и много юзал "халявные" шаблоны, и 2-3к рублей за шаб, если ты его нормально окучишь, он те может принести в разы больше, а хорошие отношения - залог нормального здоровья (для тугих, купив шаб, можно узнать некоторые вещи у разраба, совместив, со своими получить профит)
 
  • Спасибо
Реакции: angel737 и zenno.xxx

Nord

Client
Регистрация
22.03.2012
Сообщения
2 067
Благодарностей
1 084
Баллы
113
думаю, что согласен.

НО скажу от себя, я давно в нете, и много юзал "халявные" шаблоны, и 2-3к рублей за шаб, если ты его нормально окучишь, он те может принести в разы больше, а хорошие отношения - залог нормального здоровья (для тугих, купив шаб, можно узнать некоторые вещи у разраба, совместив, со своими получить профит)
Ну да. Я бы тоже купил, чисто посмотреть логику и механизмы реализации
 

daymos

Client
Регистрация
11.11.2009
Сообщения
790
Благодарностей
225
Баллы
43
ого, уже толпа купивших на скрине!
я б тоже купил, потому что разраб @sergodjan66
но я в завязке, после 6 лет в дорах
Удачи в бизе!
 
  • Спасибо
Реакции: angel737

sergodjan66

Administrator
Команда форума
Регистрация
05.09.2012
Сообщения
13 282
Благодарностей
5 360
Баллы
113
Последнее редактирование:
  • Спасибо
Реакции: Clover69 и zenno.xxx

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
Да, Сергей немало времени уделил тестированию доргена, за что ему премного Благодарен! ;-)

ого, уже толпа купивших на скрине!
Купили проект пока порядка 25-30 человек (по большей части, многие из них принимали участие в тестировании).

"Котики" с zennolab пока интересуются и бронируют места в первых рядах, кто заинтересовался.
Код решено оставить открытым на редактирование.

За первоначальные 2т.р еще есть возможность приобрести дорген :-) (пишите, периодически тут)..
 
Последнее редактирование:

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
Небольшое обновление:

- вырезана реклама Bing из тайтлов;
- устранен баг с зацикливанием при парсинге тайтлов, если кол-во макросов было > кол-ва данных;
- добавлены языки парсинга для Бинг (ru-ru, en-us, en-gb, de-de - что позволит парсить выдачу под нужный регион и языки; cookie);
- теперь в шаблоне дорвея и в useragents.txt поддерживается макрос {-Variable.l-};

Неплохо сидит в выдаче данным режим (лог, ~32.000 страниц в 10 потоков = 4ч, 20мб/с):

https://www.dropbox.com/s/aieysb2d6kj2p6u/logs.txt?dl=0

Трафик растет небольшими темпами на одной из пачек.
 
Последнее редактирование:
  • Спасибо
Реакции: Respect

FreeSite

Client
Регистрация
01.04.2011
Сообщения
81
Благодарностей
47
Баллы
18
Взял в коллекцию сей доргенчик
По самому шаблону - все запустилось и работает без проблем
Автор дал пояснения и ответил на заданные мной вопросы - человек похоже в теме и знает как и что готовится на этой кухне :-)
Обещал помочь внедрить мои пожелания и добавления.
По самим дорам пока сказать ничего не могу - там же главное индексация и траф, а это в большей степени зависит от правильных ключей и еще правильной заточки рук.
Будет что потом отписать - отпишу обязательно
Пока же доволен приобретением, рекомендую и автора и шаблон.
Аминь
 
  • Спасибо
Реакции: teodocomo и zenno.xxx

zenno.xxx

Client
Регистрация
05.10.2016
Сообщения
612
Благодарностей
202
Баллы
43
Оценил время и готовность/заинтересованность клиентов к оплате - решено оставить цену пока на уровне 2т.р

С трафиком вроде порядок - растет (одна из пачек). Обращайтесь в ЛС.

 
  • Спасибо
Реакции: sergodjan66 и Mikhail B.

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)