Только что еще раз проверил. Содержимое файла robots.txt:
User-agent: yandex Disallow: /
При добавлении главной страницы сайта Яндекс сообщает, что URL внесен в базу данных.
Хотите верьте, хотите - нет
Единственное, что могу предложить - это воспользоваться поиском по форуму. Тема ВИЦ обсуждалась здесь неоднократно.
Ну да, есть. Формула релевантности называется. Сродни формуле любви, философскому камню и вечному двигателю. Ищется всеми оптимизаторами, но никак не может найтись. :) Потому как злые владельцы поисковых систем хранят ее как мальчиш-Кибальчиш военную тайну. :)
Это какой-то web-ring получается.
Да ничего. У сайта есть ИЦ, а у страницы - ВИЦ. :)
Кой-чего добавил в табличку
Дык, если ссылаются главные страницы разных сайтов, то можно их ВИЦы сравнивать. Или можно посмотреть как выдаются ссылающиеся страницы с конкретного сайта (если таковых несколько) - главная (у которой по идее должен выть самый большой ВИЦ) далеко не всегда выдается первой.
Ну, 500 - это, наверное, слишком отпимистичный задел на будущее. :)
Оба-на! Еще один невежливый яндекс-робот! Опять яндексоиды лажанулись. Ну, и что они теперь скажут в свое оправдание, интересно? Ведь этот-то робот, в отличие от закладочного, все-таки делает запрос GET, а не HEAD, то есть скачивает документ! Или яндексоиды по-прежнему считают, что раз робот не проходит по ссылкам, то это и не робот вовсе? :D
Не по ВИЦу - факт. Проверял. У меня вообще родилась мыслишка, что по близости нахождения ссылки к началу документа. Но это предположение я не проверял. :)
