Форум Практика оптимизации Любые вопросы от новичков по оптимизации

sitemap.xml

A
На сайте с 06.11.2010
Offline
128
Alkoshenko
558
URL, отсеянные роботом
Когда мы проверили несколько URL из вашего файла Sitemap, то обнаружили, что файл robots.txt для сайта блокирует доступ к некоторым URL. Если вы не планируете заблокировать некоторые URL, содержащиеся в файле Sitemap, воспользуйтесь нашим инструментом для анализа файла robots.txt, чтобы убедиться в том, что робот Google может перейти по отправленным вами URL. Все доступные URL будут по-прежнему отправляться.

Я так понимаю то что я закрыл в роботс.тхт индексироваться не будет, а остальное будет. Да?

terranodar
На сайте с 07.01.2011
Offline
5
terranodar
#1

Alkoshenko, верно.

Вот только зачем добавлять в sitemap.xml ссылки, заблокированные в robots.txt?

Сервис http://tic-history.ru (http://tic-history.ru) - история изменения ТИЦ сайтов.
A
На сайте с 06.11.2010
Offline
128
Alkoshenko
#2

Я через генератор хмл прогнал свой сайт и скопировал карту в корень сайта и всё.

Alkoshenko добавил 17.02.2011 в 23:47

Гугл же продолжит индексировать страницы в хмл? Ступора не будет? Перегенерировать карту не на надо?

Google Map придет в Онлайн-конструктор брендов Logaster запустил Рекламные блоки AdSense доступны
terranodar
На сайте с 07.01.2011
Offline
5
terranodar
#3

Alkoshenko, я бы просто вручную убрал сиз карты сайта те ссылки, которые Вы не собираетесь отдавать на индексацию.

A
На сайте с 06.11.2010
Offline
128
Alkoshenko
#4

А если не уберать продолжит индексировать? Ступора не будет? Перегенерировать карту не на надо?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий