Indigo - Дорген на основе парсинга

=DEM=

Создатель
Регистрация
13 Авг 2012
Сообщения
0
Реакции
2
Предлагаю вашему вниманию дорген, создающий дорвеи на основе выдачи поисковых систем.
Актуальная версия доргена на момент публикации данного поста: Indigo v1.23

Пользователям форума – Скидка! (читайте в конце описания)
Функцониал актуальной версии доргена:
- посокольку дорген неоднократно обновлялся и продолджает обновляться - функционал может иметь расхождения от версии к версии.
- Многопоточность (для Windows)
- Возможность работы под OS Linux (как php-скрипт) / OS Windows (как консольное приложение)
- Два независимых режима работы дорегна
- режим Parsedor - генерация на основе спаршенной выдачи SE (не поддерживает меток, минимализм в настройке)
- режим Custom Template - генерация на основе пользовательского шаблона (поддерживает метки)
- Возможность сохранять доры локально в папке dor доргена / генерировать сразу на FTP
- Дифференцированные настройки proxy - использование прокси для заливки на FTP и для парсинга настраивается отдельными независимыми параметрами.
- Типы поддерживаемых прокси: SOCKS5 (может быть расширено в будущих версиях)
- Автоматическая обработка "падений" прокси (дорген автоматически подбирает рабочий прокси, на загрузку одного файла по FTP выделено 15 попыток)
- Встроенный проксичекер
- генерация листов URL в формате html и bb. на все доры генерируется общий лист с URL (для дальнейшей обработки в kwk)
- ЯП php
- все конфигурации задаются в файле настроек, вэбинтерфейс отсутствует
- создает малую нагрузку на процессор благодаря оптимизации процесса запуска потоков.
- 1Гц процесоро 1500mb ОЗУ OS Windows при запуске 40 потоков загрузка процессора 7-12%
- пинг залитых страниц (для режима загрузки по FTP)

Макросы (Метки) доступные в актуальной версии (для режима Custom Template)

[KEYWORD] — ключевое слово страницы (совпадает с кейвордом страницы по которому осуществляется парсинг контента (картинок и снипетов)). Кейворд берется из списка кеев, выбранных случайным образом из списка в файле keywords.txt для генерации каждой страницы дора. Данная метка заменяется одним и тем же кейвордом на всей странице. Например: «скачать бесплатно реферат» (без смены регистра символов кейворда).

[BKEYWORD] — кейворд страницы с Большой буквы. Например: «Скачать бесплатно реферат».

[KEYWORD_TRANSLIT-0] — кейворд страницы в транслите без лишних символов (пробелы и спец символы (!»№;%:?*(){}[]‘»>< и т д) заменяется на «-»). Например: «skachat-besplatno-referat».

[KEYWORD_TRANSLIT-1] — кейворд страницы в транслите символы (!»№;%:?*(){}[]‘»>< и т д) заменены пробелом. Например: «skachat besplatno referat».

[BKEYWORD_TRANSLIT-0] — кейворд страницы в транслите символы (!»№;%:?*(){}[]‘»>< и т д) заменены "-" с большой буквы. Например: «Skachat-besplatno-referat».

[BKEYWORD_TRANSLIT-1] — кейворд страницы в транслите символы (!»№;%:?*(){}[]‘»>< и т д) заменены пробелом, с большой буквы. Например: «Skachat besplatno referat».

[PKEYWORD] — кейворд страницы с перестановкой слов. Например: «реферат скачать бесплатно».

[PBKEYWORD] — кейворд страницы с большой буквы с перестановкой слов. Например: «Реферат скачать бесплатно».

[RANDKEYWORD] — замещается разными (в отличае от тега [KEYWORD]) случайными кейвордами из списка отобранных случайным образом для генерации данного дорвея. Например: «оптика очки скидки».

[RANDBKEYWORD] — случайны кей с большой буквы. Например: «Акции и скидки м видео».

[RANDURL] — выводит URL случайной страницы генерируемого дорвея. Например: «skachat-kursoviyu-versiya1-9-100.html».

[RANDLINK] — выводит ссылку случайно страницы с анкором.

[DESCRIPTION] — помещается в Html-загловок и заменяется случайно-выбранным сниппетом из старницы поиска спарешенной по кючевому слову страницы.

[SITE] — метка заменяется названием домена, на FTP которого генерируется дорвей. Например: «site.ru».

[MAP] — линк на xml карту сайта.

[AURL] — URL текущей страницы. Например: «skachat-besplatno-referat.html».

[RANDNICK] — случайным образом сгенерированный никнейм (латинский алфавит).

[BRANDNICK] — случайным образом сгенерированный никнейм (латинский алфавит) с большой щаглавной буквы.

[RAND_RUNAME_MALE_EN] — случайным образом выбранное русское имя (латинский алфавит).

[RAND_ENNAME_MALE_EN] — случайным образом выбранное зарубежное имя (латинский алфавит).

[RAND-x-y] — случайное число из заданного диапазона. Например если [RAND-10-20], то выведет случайное число между 10 и 20, например 17. Если [RAND-666-9999], то выведет случайное число между 666 и 9999, например 912 или 1823 и т. д.

[RANDLIST_FROM_FILE-Путь к файлу] — случайная строчка из .txt файла, указанного в макросе. Например [RANDLIST_FROM_FILE-c:\indigo_v1.2\date\anekdotu.txt] — вставить случайную строку из файла anekdotu.txt.

[RANDLIST_FROM_FILE-x-y-Путь к файлу] — указанное количество случайных строчки из .txt файла, указанного в макросе. Например [RANDLIST_FROM_FILE-3-10-c:\indigo_v1.2\date\anekdotu.txt] — вставить случайное количество строк из файла anekdotu.txt. При этом количество вставляемых строк будет в диапазоне от x до y. В данном примере в диапазоне от 3 до 10 строк — каждый раз по разному (При каждой итерации обработке данного макроса).

[{Вариант 1|Вариант 2|Вариант 3|...|Вариант N}] — вывод в любом месте разных вариантов своего текста, включая макросы. Внутренние макросы пока не поддерживаются.

[REPEAT-x-y][/REPEAT] — позволяет повторять часть кода определённое число раз. Например, [REPEAT-5-10]Привет![/REPEAT] выведет текст «Привет!» 7 раз: «Привет!Привет!Привет!Привет!Привет!Привет!Привет!».

[LINKS] — данная метка заменяется блоком ссылок на страницы второго уровня генерируемого дорвея по 4-9 ссылок на блок.

[LINKS-x-y] [A][/LINKS] — выводит заданное в указанном диапазоне количеств ссылок. Где [A] непосредственно сама ссылка. Например:
[LINKS-3-5]
[<p>[A]</p>
[/LINKS]
выведет:
PHP:
    <p><a href=»skachat-kursoviyu.html» title=»Скачать курсовую»>Скачать курсовую</a></p>
    <p><a href=»skachat-referat.html» title=»Скачать реферат»>Скачать реферат</a></p>
    <p><a href=»skachat-diplom.html» title=»Скачать диплом»>Скачать диплом</a></p>
    <p><a href=»skachat-knigu.html» title=»Скачать книгу»>Скачать книгу</a></p>

[SERP] — метка замещается блоком текста, состоящим из перемешанных случайным образом снипеетов и заголовков сниппетов, предварительно очищенных от html-тэгов. Метка из прошлых версий доргена — в данный момент ею пользуются неактивно.

[IMAGE1] — метка формируется из постоянной части [IMAGEx], где на месте x вставляется порядковый номер изображения в выдаче googleimage в диапазоне от 1-20. Примеры меток [IMAGE1], [IMAGE8], …, [IMAGE20]. Метка из прошлых версий доргена — в данный момент ею пользуются неактивно.

[SNIPPET_TITLE] — метка заменяется на тайтл сниппета, спаршенного из выдачи (шаблоны запросов задаются в файле с расширением .cfg), аналогично меткам IMAGE и VIDEO имеет цифровой индекс. Примеры меток [SNIPPET_TITLE1], [SNIPPET_TITLE8], SNIPPET_TITLE10]. Максимальный цифровой индекс определяется количеством снипентов на странице поисковой выдачи (~+/-3), в случае отсутствия снипета с таким номером — берется случайны тайтл сниппета. Метка из прошлых версий доргена — в данный момент ею пользуются неактивно.

[SNIPPET_BODY] — аналогичная предыдущей по особенностям использования метка, для текста сниппета. Метка из прошлых версий доргена — в данный момент ею пользуются неактивно.

[IMAGE_G-1], …, [IMAGE_G-20] — вывод полного url на спарсенную из googleimage картинку.

[IMAGE_G_SNIPP-1], …, [IMAGE_G_SNIPP-20] — вывод текста под картинкой, спарсенного вместе с картинкой из googleimage.

[IMAGE_B-1], …, [IMAGE_B-20] — вывод полного url на спарсенную из bing.

[SNIPPET_TITLE_G_1], [SNIPPET_TITLE_G_2], …, [SNIPPET_TITLE_G_10] — тайтл сниппета спарсенного по кею из Google.

[SNIPPET_BODY_G_1], [SNIPPET_BODY_G_2], …, [SNIPPET_BODY_G_10] — сам снипет спарсенный по кею из Google.

[SNIPPET_TITLE_Y_1], [SNIPPET_TITLE_Y_2], …, [SNIPPET_TITLE_Y_10] — тайтл сниппета спарсенного по кею из Яндекс.

[SNIPPET_BODY_Y_1], [SNIPPET_BODY_Y_2], …, [SNIPPET_BODY_Y_10] — сам снипет, спарсенный по кею из Яндекс.

[SNIPPET_TITLE_B_1], [SNIPPET_TITLE_B_2], …, [SNIPPET_TITLE_B_10] — тайтл снипета, спарсенного по кею из Бинга (Bing.com).

[SNIPPET_BODY_B_1], [SNIPPET_BODY_B_2], …, [SNIPPET_BODY_B_10] — сам снипет, спарсенного по кею из Бинга (Bing.com).

[VIDEO1], [VIDEO2], …, [VIDEO20] — метка замещается на хэш видео с youtube, дополняется номерами от 1-20.

В комплект оставки лицензии входят:
- Техподдержка
- Бесплатные обновлени
- Возможность участвовать в развитии продукта, подавая предложения по развитию в сапорт.

Примеры дорвеев на Indigo
Для просмотра ссылки Войди или Зарегистрируйся
Для просмотра ссылки Войди или Зарегистрируйся
Для просмотра ссылки Войди или Зарегистрируйся
Для просмотра ссылки Войди или Зарегистрируйся

Как Купить дорген Indigo
Стоимость доргена Indigo составляет $40.

Пользователям форума – Скидка!
Пользователям форума nulled.cc с уровнем Level 3 и выше (то есть всем у кого как минимум 50 сообщений 10 симпатий и больше 30 дней на форуме)
при приобретении доргена Indigo предоставляется скидка в размере 20% от актуальной стоимости продукта.

Для покупки, вам необходимо связаться по ICQ 620053391
 
Вышел апдейт Indigo v1.27
Основные нововведния данной версии касаются оптимизации кода парссеров: были устранены особенности старого алгоритма, приводившие к появлению пустых меток а также в 4 раза увеличена скорость парсинга.
 
Курс. Научиться Создавать свои парсеры и вэб-боты за неделю Реально


Возможно в своей работе с СЕО вы не раз сталкивались с ситуацией нехватки ресурсов на осуществление новой идеи. Возможно на рынке не было подходящего для ее реализации софта, возможно он есть но несколько не с тем функционалом, а возможно его цена превышла бюджет проекта. Возможно вам также приходилось создавать громоздкие и нестабильные конструкции из нескольких покупых софтов, подпирая все это "костылями" собственных bat или bash -скриптов. Такая конструкция периодически "падала"и отвлеала от последующих этапов проекта, превращая работу над идеей в повод ее забросить..
Я столкунлся с аналогичной трудностью на заре своей практики. Большими запасами времени я тогда не располагал, и поэтому мне пришлось научиться программировать за 2 недели. Уже через 2 недели я написал свой собсвенный парсер и небольшую CMS и начал заниматься реализацией многпоточности. А через месяц после начала самообучения появился первый мой генератор сайтов на основе парсинга, который принес весьма солидный профит в сапе.
Продолжая совершенствоваать технологии я вывел алгоритм написания ботов на качественно новый уровень, что позволяет "клепать" очередного за один день, включая отладку.
Что я предлагаю ?
Это поделиться с вами формализованной технологией, которая позволит вам с моей помощью в обучении уже через 7-10 дней, придя на курс с нулевыми знаниями PHP, начать создавать свои собсвенные софты для выполнения автоматических действий в сети.
На практике обучение будет состоять из методички, пакета заданий, разбитиых на модули, и моих пояснений и "разборов полетов" по каждому заданию, вплоть до получения положителнього результа.
Заявленный мною срок обучения - это не преувеличение, а мой, проверенный на практике опыт. Такая скорость обучения достигнута мною была за счет выбрасывания всего ненужного из процесса и занятия исключителньо практкой решения задачи, оставив теорию на чтение по выходным и под настроение. Именно на этом принципе я собираюс построить обучение - только практика и минимлаьнонеобходимый объем теории.
Я не говрю что будет легко, но результат будет того стоить.

Цена вопроса - 100$ (с человека)

Предварительная запись в ICQ 620053391

По моменту старта курса пришел к слеующей схеме: запись по предоплате, с момента первой предоплаты стартует отсчет времени, через 10 дней - старт курса. Сколько людей наберется - стольких поведу.
 
Во сколько оценивается первая предоплата?
 
она всего одна для кадого участника и равна 100$
 
Кто-нибудь воспользовался предложением? Будут отзывы?
На баблорубе многие записывались - отрицательных отзывов не было, методика, видимо, и вправду оригинальная.
 
Если вы цените свое время, вилите перспективы развтия, а потому готовы инвестировать в свое развтитие, то у меня для вас есть хорошая новость - Открыт набор на Третий поток Курса по SEO-программированиию.
Впрочем, предоставляемая мною на курсе технология позволяет не только сэкономить ваше время, но и более эффективно распределить финансовый ресурс, поскольку снимает необходимость заказывать тонны скриптов у сторонних разработчиков, при этом засвечивая им свои темы.
Цена обучения 100WMZ
Записаться можно обратившись в ICQ 620053391

PS. Если вы не цените свое время и не видите перспектив развития - можете игнорировать данный курс.
 
Назад
Сверху