Ссылка на главной странице Яндекса рядом с кнопкой "Найти" :).
Думаете, что роботы тоже знают SSL ?
Если робот уже скачивал эту страницу, то он запомнил адрес, чтобы зайти как-нибудь еще. Дальше все зависит только от ответов на запрос этой страницы.
Расширенный поиск.
alexkr, насчет "заработать" - это вам не сюда, тут раздел "Поисковые системы".
Ознакомьтесь: .
Надеюсь, что наказание за рассылку будет быстрым и эффективным.
one for one, не демпингуйте, требуйте предоплаты 50% :). Кризис кризисом, но марку надо держать :).
Когда-то это был самый продвинутый поисковик, по сравнению с Рамблером и Яндексом и занимал процентов 20.
А кто тогда еще не успел родиться, я не знаю.
Если вы заметили, указан конкретный User-agent, в Яндексе (а также в Google и Yahoo) все эти расширения документированы.
А предлагаемое вами "закрытие" ссылок, особенно через nofollow, никак не может помешать индексации страниц, на которые они ведут.
Первый - регистратор, второй - скорее всего место работы владелца, там свои DNS-сервера.
Трясите опять через хостера (мастерхост).
