Indigo Dorgen - генератор сайтов на основе парсинга

Предлагаю вашему вниманию новую разработку — дорген, который создает дорвеи на основе выдачи поисковых систем.

Актуальная версия доргена на момент публикации данного поста: Indigo v1.23

Функцониал актуальной версии доргена:

- посокольку дорген неоднократно обновлялся и продолджает обновляться - функционал может иметь расхождения от версии к версии.

- Многопоточность (для Windows)

- Возможность работы под OS Linux (как php-скрипт) / OS Windows (как консольное приложение)

- Два независимых режима работы дорегна

- режим Parsedor - генерация на основе спаршенной выдачи SE (не поддерживает меток, минимализм в настройке)

- режим Custom Template - генерация на основе пользовательского шаблона (поддерживает метки)

- Возможность сохранять доры локально в папке dor доргена / генерировать сразу на FTP

- Дифференцированные настройки proxy - использование прокси для заливки на FTP и для парсинга настраивается отдельными независимыми параметрами.

- Типы поддерживаемых прокси: SOCKS5 (может быть расширено в будущих версиях)

- Автоматическая обработка "падений" прокси (дорген автоматически подбирает рабочий прокси, на загрузку одного файла по FTP выделено 15 попыток)

- Встроенный проксичекер

- генерация листов URL в формате html и bb. на все доры генерируется общий лист с URL (для дальнейшей обработки в kwk)

- ЯП php

- все конфигурации задаются в файле настроек, вэбинтерфейс отсутствует

- создает малую нагрузку на процессор благодаря оптимизации процесса запуска потоков.

- 1Гц процесоро 1500mb ОЗУ OS Windows при запуске 40 потоков загрузка процессора 7-12%

- пинг залитых страниц (для режима загрузки по FTP)

Макросы (Метки) доступные в актуальной версии (для режима Custom Template)

[KEYWORD] — ключевое слово страницы (совпадает с кейвордом страницы по которому осуществляется парсинг контента (картинок и снипетов)). Кейворд берется из списка кеев, выбранных случайным образом из списка в файле keywords.txt для генерации каждой страницы дора. Данная метка заменяется одним и тем же кейвордом на всей странице. Например: «скачать бесплатно реферат» (без смены регистра символов кейворда).

[BKEYWORD] — кейворд страницы с Большой буквы. Например: «Скачать бесплатно реферат».

[KEYWORD_TRANSLIT-0] — кейворд страницы в транслите без лишних символов (пробелы и спец символы (!»№;%:?*(){}[]‘»>< и т д) заменяется на «-»). Например: «skachat-besplatno-referat».

[KEYWORD_TRANSLIT-1] — кейворд страницы в транслите символы (!»№;%:?*(){}[]‘»>< и т д) заменены пробелом. Например: «skachat besplatno referat».

[BKEYWORD_TRANSLIT-0] — кейворд страницы в транслите символы (!»№;%:?*(){}[]‘»>< и т д) заменены "-" с большой буквы. Например: «Skachat-besplatno-referat».

[BKEYWORD_TRANSLIT-1] — кейворд страницы в транслите символы (!»№;%:?*(){}[]‘»>< и т д) заменены пробелом, с большой буквы. Например: «Skachat besplatno referat».

[PKEYWORD] — кейворд страницы с перестановкой слов. Например: «реферат скачать бесплатно».

[PBKEYWORD] — кейворд страницы с большой буквы с перестановкой слов. Например: «Реферат скачать бесплатно».

[RANDKEYWORD] — замещается разными (в отличае от тега [KEYWORD]) случайными кейвордами из списка отобранных случайным образом для генерации данного дорвея. Например: «оптика очки скидки».

[RANDBKEYWORD] — случайны кей с большой буквы. Например: «Акции и скидки м видео».

[RANDURL] — выводит URL случайной страницы генерируемого дорвея. Например: «skachat-kursoviyu-versiya1-9-100.html».

[RANDLINK] — выводит ссылку случайно страницы с анкором.

[DESCRIPTION] — помещается в Html-загловок и заменяется случайно-выбранным сниппетом из старницы поиска спарешенной по кючевому слову страницы.

[SITE] — метка заменяется названием домена, на FTP которого генерируется дорвей. Например: «site.ru».

[MAP] — линк на xml карту сайта.

[AURL] — URL текущей страницы. Например: «skachat-besplatno-referat.html».

[RANDNICK] — случайным образом сгенерированный никнейм (латинский алфавит).

[BRANDNICK] — случайным образом сгенерированный никнейм (латинский алфавит) с большой щаглавной буквы.

[RAND_RUNAME_MALE_EN] — случайным образом выбранное русское имя (латинский алфавит).

[RAND_ENNAME_MALE_EN] — случайным образом выбранное зарубежное имя (латинский алфавит).

[RAND-x-y] — случайное число из заданного диапазона. Например если [RAND-10-20], то выведет случайное число между 10 и 20, например 17. Если [RAND-666-9999], то выведет случайное число между 666 и 9999, например 912 или 1823 и т. д.

[RANDLIST_FROM_FILE-Путь к файлу] — случайная строчка из .txt файла, указанного в макросе. Например [RANDLIST_FROM_FILE-c:\indigo_v1.2\date\anekdotu.txt] — вставить случайную строку из файла anekdotu.txt.

[RANDLIST_FROM_FILE-x-y-Путь к файлу] — указанное количество случайных строчки из .txt файла, указанного в макросе. Например [RANDLIST_FROM_FILE-3-10-c:\indigo_v1.2\date\anekdotu.txt] — вставить случайное количество строк из файла anekdotu.txt. При этом количество вставляемых строк будет в диапазоне от x до y. В данном примере в диапазоне от 3 до 10 строк — каждый раз по разному (При каждой итерации обработке данного макроса).

[{Вариант 1|Вариант 2|Вариант 3|...|Вариант N}] — вывод в любом месте разных вариантов своего текста, включая макросы. Внутренние макросы пока не поддерживаются.

[REPEAT-x-y][/REPEAT] — позволяет повторять часть кода определённое число раз. Например, [REPEAT-5-10]Привет![/REPEAT] выведет текст «Привет!» 7 раз: «Привет!Привет!Привет!Привет!Привет!Привет!Привет!».

[LINKS] — данная метка заменяется блоком ссылок на страницы второго уровня генерируемого дорвея по 4-9 ссылок на блок.

[LINKS-x-y] [A][/LINKS] — выводит заданное в указанном диапазоне количеств ссылок. Где [A] непосредственно сама ссылка. Например:

[LINKS-3-5]

<p>[A]</p>

[/LINKS]

выведет:

    <p><a href=»skachat-kursoviyu.html» title=»Скачать курсовую»>Скачать курсовую</a></p>
    <p><a href=»skachat-referat.html» title=»Скачать реферат»>Скачать реферат</a></p>
    <p><a href=»skachat-diplom.html» title=»Скачать диплом»>Скачать диплом</a></p>
    <p><a href=»skachat-knigu.html» title=»Скачать книгу»>Скачать книгу</a></p>

[SERP] — метка замещается блоком текста, состоящим из перемешанных случайным образом снипеетов и заголовков сниппетов, предварительно очищенных от html-тэгов. Метка из прошлых версий доргена — в данный момент ею пользуются неактивно.

[IMAGE1] — метка формируется из постоянной части [IMAGEx], где на месте x вставляется порядковый номер изображения в выдаче googleimage в диапазоне от 1-20. Примеры меток [IMAGE1], [IMAGE8], …, [IMAGE20]. Метка из прошлых версий доргена — в данный момент ею пользуются неактивно.

[SNIPPET_TITLE] — метка заменяется на тайтл сниппета, спаршенного из выдачи (шаблоны запросов задаются в файле с расширением .cfg), аналогично меткам IMAGE и VIDEO имеет цифровой индекс. Примеры меток [SNIPPET_TITLE1], [SNIPPET_TITLE8], SNIPPET_TITLE10]. Максимальный цифровой индекс определяется количеством снипентов на странице поисковой выдачи (~+/-3), в случае отсутствия снипета с таким номером — берется случайны тайтл сниппета. Метка из прошлых версий доргена — в данный момент ею пользуются неактивно.

[SNIPPET_BODY] — аналогичная предыдущей по особенностям использования метка, для текста сниппета. Метка из прошлых версий доргена — в данный момент ею пользуются неактивно.

[IMAGE_G-1], …, [IMAGE_G-20] — вывод полного url на спарсенную из googleimage картинку.

[IMAGE_G_SNIPP-1], …, [IMAGE_G_SNIPP-20] — вывод текста под картинкой, спарсенного вместе с картинкой из googleimage.

[IMAGE_B-1], …, [IMAGE_B-20] — вывод полного url на спарсенную из bing.

[SNIPPET_TITLE_G_1], [SNIPPET_TITLE_G_2], …, [SNIPPET_TITLE_G_10] — тайтл сниппета спарсенного по кею из Google.

[SNIPPET_BODY_G_1], [SNIPPET_BODY_G_2], …, [SNIPPET_BODY_G_10] — сам снипет спарсенный по кею из Google.

[SNIPPET_TITLE_Y_1], [SNIPPET_TITLE_Y_2], …, [SNIPPET_TITLE_Y_10] — тайтл сниппета спарсенного по кею из Яндекс.

[SNIPPET_BODY_Y_1], [SNIPPET_BODY_Y_2], …, [SNIPPET_BODY_Y_10] — сам снипет, спарсенный по кею из Яндекс.

[SNIPPET_TITLE_B_1], [SNIPPET_TITLE_B_2], …, [SNIPPET_TITLE_B_10] — тайтл снипета, спарсенного по кею из Бинга (Bing.com).

[SNIPPET_BODY_B_1], [SNIPPET_BODY_B_2], …, [SNIPPET_BODY_B_10] — сам снипет, спарсенного по кею из Бинга (Bing.com).

[VIDEO1], [VIDEO2], …, [VIDEO20] — метка замещается на хэш видео с youtube, дополняется номерами от 1-20.

Как Купить дорген Indigo

Стоимость доргена Indigo составляет $40.

Для покупки, вам необходимо связаться по ICQ 620053391