Проверка домена на занятость без whois

12
A5
На сайте с 14.07.2012
Offline
17
#11

foxer666: Это парсинг вывода команды dig, скорее всего, не отработает ситуацию не прописанной A записи.

Парсить вывод команды, либо подобрать другую:

dig ya21.ru +trace | grep ^ya21.ru | grep NS

F6
На сайте с 30.05.2008
Offline
58
#12
Alex_5252:
foxer666: Это парсинг вывода команды dig, скорее всего, не отработает ситуацию не прописанной A записи.
Парсить вывод команды, либо подобрать другую:
dig ya21.ru +trace | grep ^ya21.ru | grep NS

Понял, не подходит, погрешность та же, что и при моем варианте. Запрос будет некоректно обрабатывать домены зарегистрированные, но с пустой записью А типа.

---------- Добавлено 30.03.2013 в 23:45 ----------

Alex_5252:
foxer666: Это парсинг вывода команды dig, скорее всего, не отработает ситуацию не прописанной A записи.
Парсить вывод команды, либо подобрать другую:
dig ya21.ru +trace | grep ^ya21.ru | grep NS

Почитал немного, действительно DIG рекомендуют как альтернативу whois, проверил, не делегированные домены она все же не понимает :(

---------- Добавлено 31.03.2013 в 00:00 ----------

Появилась идея! :)

Делаем два прохода:

1. Скан на наличие DNS записей в домене, если есть - занят, если нет - шаг два.

2. Скан домена по whois, если занят - то занят, если свободен - то свободен.

Что даст - значительное уменьшение (в сотни раз, а то и более) количества ненужных запросов к хуиз, нет необходимости подключать прокси или сканировать все 9 источников хуиз.

Что думаете?

DA
На сайте с 20.08.2009
Offline
58
#13
foxer666:
сложный скрипт с использованием прокси (проверка прокси на бан, работоспособность, подставление нужного прокси, через который обращения еще не было к хуиз серверу, чтобы не забанило). Теоретически можно зауникалить каждый прокси и вести по нему статистику обращений и ответов хуиз сервера.

...

Делаем два прохода:
1. Скан на наличие DNS записей в домене, если есть - занят, если нет - шаг два.
2. Скан домена по whois, если занят - то занят, если свободен - то свободен.

...

Что думаете?

Все процитированное правильно. Я это все реализовывал в своем My Domain Checker - работает отлично. Единственное отличие состоит в том, что я не проверяю на бан прокси, а выставляю правильный лимит для количества обращений через прокси в единицу времени, что бы не было бана. Для зоны RU - 30 запросов в минуту.

http://www.mydomainchecker.net/ (http://www.mydomainchecker.net/)
F6
На сайте с 30.05.2008
Offline
58
#14
DecAnisimov:
Все процитированное правильно. Я это все реализовывал в своем My Domain Checker - работает отлично. Единственное отличие состоит в том, что я не проверяю на бан прокси, а выставляю правильный лимит для количества обращений через прокси в единицу времени, что бы не было бана. Для зоны RU - 30 запросов в минуту.

Спасибо за ответ, я не этот бан прокси имел ввиду, а чтобы скрипт/программа банила мертвые прокси, смысл через них траф гнать, если они того уже? :) Есть у меня в пользовании программа подобная Вашей, все устраивает, в свое время купил все PRO дополнения и функции, работает на отлично! И как раз там бан прокси есть, работает только через живые прокси. Надеюсь автор программы меня не нагнет за раздачу идей :))

DA
На сайте с 20.08.2009
Offline
58
#15
foxer666:
Есть у меня в пользовании программа подобная Вашей

А что за программа, если не секрет?

F6
На сайте с 30.05.2008
Offline
58
#16
DecAnisimov:
А что за программа, если не секрет?

Отписался в личку.

Вы, как автор подобной программы, не задумывались над ускорением ее работы, путем отключения ненужных функций и запросов? Думаю данная тема для Вас должна быть также интересна?

B5
На сайте с 24.02.2011
Offline
20
#17
foxer666:
Доброго времени суток.

Прошу поделиться информацией, возможна ли Проверка домена на занятость без обращения к whois серверам? Звучит как бред, но многие проверяют домены по наличию DNS записей А типа, whois для этого не нужен, но и информация может быть ошибочной, если домен просто не делегирован. Есть ли еще способы?

Спасибо.

http://nicy.biz/

_VOLDEMAR_
На сайте с 13.03.2007
Offline
264
#18

Я сброшу 100 млн доменов, проверишь список на занятость поштучно? 😂

V
На сайте с 05.01.2012
Offline
53
#19

foxer666,

Стать партнёром какого-то регистратора и проверять занятость через их API

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий