Очень жаль, что узнать невозможно. Ну если это так, то тему можно закрывать.
kimberlit, но может по визуальным каким-то признакам возможно? Например, по знакам разделителям и т.п.
deedee, затем чтобы купить на этих сайтах чего-нибудь. А вот биржу никак не могу определить. Прошу помощи у знатоков.
Тогда какие все-таки можно идентифицировать?
Не палите темы! Ссылку нужно срочно убирать, а то Яндекс забанит каталог. :D
Все не так.
Наблюдаю за одним сайтиком уже достаточно давно.
Раньше при вводе в адресной строке - www.site.ru/tobots.txt отдавал ошибку 404, но "глазами Яндекса" - http://www.yandex.ru/cgi-bin/test-robots файлик был виден.
А теперь и "глазами Яндекса" отдает "Сервер вернул код ошибки 404" хотя знаю точно, на сервере этот файлик есть.
Вопрос в следующем:
технически как сделать неинтересует,
интересует, как все-таки robots.txt увидеть???
Сделайте откат Яндекса до 01.09.2007 и проанализируйте :)
Это вы пока поторопились. Пока что майл (яндекс).
Если вы еще верите в этот мета-тег и в его пользу, то разделяйте запятыми, как вам сказали выше.
Загнул. Редко, но бывает. А в основном, как вы сказали.
