А че за мод, можете подсказать где скачать?
Че то я там вообще никак не могу разобраться, может что-то другое есть? Или просто опишите как карта сайта должна выглядить? Тоесть как я понимаю, это страница на которой написаны все ссылки, моего сайта тоесть например услуги, вакансии и т.д. Но я тогда не понимаю зачем мне карта сайта у меня контент не сложный всего состоящий из 7 ссылок которые ведут только на одну страницу и больше никуда....
Кстати, хотел еще спросить, вот если я от роботов с помощью robots.txt закрыл стр. http://alfameds.ru/links.htm ее точно не проверит например яндекс
А ее и не должно быть, где вы ее нашли?!!!
ААА стоп все все все, все переделал теперь все правильно точно!!!
robots.txt выглядит сейчас так:
User-Agent: Yandex
Disallow: /links.htm
Host: www.alfameds.ru
User-agent: Yandex
User-agent: Googlebot
User-agent: StackRambler
User-agent: Aport
User-agent: Webalta
User-Agent: Yahoo! Slurp
И проверка пишет только это: Запрещена индексация всех URL, начинающихся с указанных префиксов:
/links.htm
а проверка на сайт alfamed.org это: Запрещена индексация всех URL, начинающихся с указанных префиксов:
/
Индексация сервера www.alfamed.org:80 запрещена полностью.
Теперь все правильно
Всем огромное спасибо!!! выручили
Мне то нужно чтобы яндекс индексировал этот сайт alfameds.ru, но не индексировал этот alfamed.org(это зеркало)
Когда все поменял вот что пишет проверка, блин значит не правильно
http://www.yandex.ru/cgi-bin/test-robots?host=www.alfameds.ru
Все щас поменял и сделал вот так
Disallow: /
Я еще просто не хочу делать для всех роботов, просто вдруг и роботы каталогов не будут видеть ссылки из-за robots.txt моего
а что туда вводить URL? или что че то не получается...
вот оцените прописал робот.txt правда не знаю правильно ли все проверьте, и не знаю правильно ли я его запихнул
User-Agent: *
Disallow: alfameds.ru/links.htm
