Расширил охват доменных зон, к .com, .net, .org, .ru добавились .info, .biz, .name, .us, .eu, .su, что позволяет в результате поиска предлагать больше вариантов покупателю услуги.
Экспериментальная услуга для поиска контента: по желаемой тематике собираются свободные домены по ключевым запросам с DA до 10 и предоставляются списком покупателю. Дальше вам уже руками нужно чекать статьи на уник и перетаскивать на проекты. Вы получите список доменов и количество записей в архиве, а также ключи, по которым домен найден.
Ценообразование следующее: не менее 100 доменов - 20$, не менее 500 - 80$.
А также обновился скрипт для самостоятельного поиска доменов /ru/forum/1011758 , пост #5
Обновление WebBear 1.1
1. Добавлена поддержка зон во whois: .info, .biz, .name, .us, .eu, .su
Поддерживались ранее: .com, .net, .org, .ru
Результаты парсинга в базе висят, просто запустите сбор whois в уже имеющихся проектах и выплывут новые домены.
2. Новые колонки в списке доменов:
WAy - Наличие истории в вэбархиве, за какие года
Was - Количество снимков в вэбархиве
***Блок ссылочное
MOZ - ранее было просто ссылки. Количество внешних и внутренних по MOZ
MOZ EQ - внешние по MOZ
SEMRUSH - количество ссылок по SemRush (вероятно что внешних, пояснения нет)
3. Шапка таблицы в списке доменов дублируется каждые 10 строк для юзабилити.
4. В настройках в блоке статистики выводится баланс в API seo-rank
Для обновления распакуйте архив в корень директории скрипта, заменив файлы.
Выпущена бета и разослана покупателям.
Скрипт решает две задачи: поиск контента в вэбархиве и поиск дропов. Местных форумчан скорее заинтересует механизм поиска дропов, нежели сбор контента с архива, потому об этом моменте подробнее:
Механика поиска:
1. Загоняются ключи по теме, парсятся результаты поиска доменов по ним. Искать можно как под бурж, так и под рунет.
2. Затем происходит первичная проверка доменов в плане ответа сервера. Если пришли пустые хидеры, то присваивается статус "возможно свободен". Он может быть занят, просто сервер лежит или не ответил за 5 секунд.
3. Третьим этапом "возможно свободные" домены пробиваются по whois'у. Сейчас это зоны .com, .net, .org и .ru. Остальные в процессе. Первые две зоны чекает через фришный быстрый API, второй парсингом с задержкой в 4 секунды и периодическими банами (через 30 секунд автоматом повторяем запрос, блока уже нет). Через время прикручу прокси.
4. И финальный этап, это чекинг DA, PA, moz rank и ссылки по moz'у.
5. Напротив каждого домена ссылка на вэбархив для просмотра его истории.
Из текущих наблюдений, картина такая:
1. Бурж гэмблинг: много DA 18-20, немного DA 21-25. Уровень заспама дорами (размещение по истории) ниже среднего.
2. Бурж фарма: DA 15-22, выше 23 из 300 доменов не попадалось. Ключи практически в каждом домене, ссылок на каждом масса.
3. Ру фарма: из 100 доменов у восьми DA 15-20, а также один DA 26. Практически все с ключом и жирным ссылочным. Тест на 20 ключах по ВЧ.
4. Белые тематики бурж: много DA 17-23, ключей в доменах чуть больше среднего. Ссылки рэндомно.
Т.е. если вам нужно много доменов с DA 15-25, софт это сделает.
Цена на момент поста 170$, мои контакты выше.
Памятка заказчику:
1. Услуга заключается в подборе свободного домена. Вы получите адреса сайтов и зарегистрируете их самостотельно у своего регистратора.
2. Ценообразование: 1 DA = 1$. Адрес домена с DA 21 будет стоить 21$.
3. Максимальные значения DA найденных доменов на практике не превышают 25.
4. Если тематика специфическая, вхождение ключей в домен маловероятно. Если это принципиально, указывайте до начала подбора.
Последний день предзаказа. Осталось навести косметику, в понедельник в течение дня (~ в 16.00) скрипт будет завершен.
Демонстрация функционала в части сбора свободных доменов по теме pharma в бурже, отработано 20 ключей за полчаса:
Completed. Next
Клубничная тема:
#19641, зона .com, DA 18, PA 37, moz 3.7, ссылок 5339. В домене ключ mastur****on.
Цена 18$ + стоимость регистрации домена.
#19417, зона .com, DA 8, PA 15, moz 1.5, ссылок 13066. В домене ключ hiddencam.
Цена 8$ + стоимость регистрации домена.
#19843, зона .net, DA 23, PA 31, moz 3.1, ссылок 86. Разношерстная история домена, в домене без ключей, испанское название. Добыт по адалт-запросу.
Цена 23$ + стоимость регистрации домена.
Ру? ......
Своя разработка /ru/forum/1011758.
1. По ключам парсятся результаты поиска в web.archive.org
2. Домены чекаются по whois на доступность
3. По API сервиса собираются показатели DA, PA, moz и кол-во ссылок.
4. Потом руками проверяю историю контента на домене.
Самая запара это парсинг архива, если будешь писать аналог. С остальным проще.
Если заказывать у меня, то ключи нужны редко, если тематика сильно специфическая. А так, достаточно направления.
В связи со срывами последних двух заказов (потраченного впустую времени), надо сразу обозначить, от какого количества DA интересны домены, обязательны ли тонна ссылок и ключ в домене.
#16829 , зона com, тема лечения заболеваний, DA 22, PA 41, moz rank 4.1, ссылок 1243 .
2012-2013 год: одностраничник с описанием таблетки, других сайтов в архиве на этом домене нет.
Цена 22$ + стоимость регистрации домена.
#5285, зона com, в ключе андроид и планшет, 4 слова. DA 22, PA 17, moz 1.7, 3 ссылки.
2014: каталог планшетов на базе android
#5597, зона net, в ключе mobile, 2 слова. DA 17, PA 25, moz 2.5, ссылок 81034.
2013-18: каталог игр и программ под android
Цена 17$ + стоимость регистрации домена.