Sitemap - как вписать в robots.txt?

123
[Удален]
#11
The WishMaster:
Не обязательно.

Спасибо большое :)

seolink74
На сайте с 02.06.2006
Offline
396
#12
Ктенсдорф:
Подскажите пожалуйста как вписать http://site.ru/sitemap.xml

Сейчас так выглядит robots.txt:

Нет необходимости. Просто добавить информацию о sitemap.xml в панеле вебмастера ЯВМ И ГВМ

Гугл отреагирует моментально

Яндекс в течении 2-3 недель

Продвижение в ТОП3 Яндекс с оплатой по факту(писать в личку/Москва)
[Удален]
#13

Да, я в Гугле и Яндексе добавил sitemap.

Но подумал, что на всякий пожарный случай нужно и в robots.txt прописать.

В общем сейчас туда ещё вписал Disallow: - пустую, так тут советуется: http://robotstxt.org.ru/robotstxterrors#______1

User-agent: *
Disallow: /admin/
Disallow: /piwik/
Disallow: /feedback/
Disallow: *.swf

User-agent: Yandex
Disallow:
Host: site.com
Sitemap: http://site.com/sitemap.xml
Crazy & Co.
На сайте с 25.01.2007
Offline
221
#14
Ктенсдорф:

В общем сейчас туда ещё вписал Disallow: - пустую, так тут советуется: http://robotstxt.org.ru/robotstxterrors#______1

С таким robots Яндекс будет индексировать разделы: admin, piwik, feedback. Другие поисковики нет.

The WishMaster
На сайте с 29.09.2005
Offline
2542
#15
Crazy & Co.:
С таким robots Яндекс будет индексировать разделы: admin, piwik, feedback. Другие поисковики нет.

Почему? Ты хочешь сказать, что первая инструкция для него не играет роли?

Пешу текста дешыго! Тематики - туризм, СЕО, творчество, кулинария, шизотерика :)
[Удален]
#16
Crazy & Co.:
С таким robots Яндекс будет индексировать разделы: admin, piwik, feedback. Другие поисковики нет.

А так правильно?:

User-agent: *

Disallow: /admin/

Disallow: /piwik/

Disallow: /feedback/

Disallow: *.swf

User-agent: Yandex

Disallow: /admin/

Disallow: /piwik/

Disallow: /feedback/

Disallow: *.swf

Host: site.com

Sitemap: http://site.com/sitemap.xml

siv1987
На сайте с 02.04.2009
Offline
427
#17
The WishMaster:
Почему? Ты хочешь сказать, что первая инструкция для него не играет роли?

Не играет, если объявлена отдельно секция, он читает только те инструкции которые прописаны в ней для него.

И вообще, ТС, Sitemap внесекционная директива, это означает что ее читают все пс, независимо под каким юзер-агентом она находится.

Ктенсдорф:
А так правильно?:

Правильно.

The WishMaster
На сайте с 29.09.2005
Offline
2542
#18
siv1987:
Не играет, если объявлена отдельно секция, он читает только те инструкции которые прописаны в ней для него.

Если это действительно так - то не знал...

siv1987
На сайте с 02.04.2009
Offline
427
#19
The WishMaster:
Если это действительно так - то не знал...

Это легко проверить, http://webmaster.yandex.ru/robots.xml

создайте две секции - одна общая, другая для яндекса, с разными запретами. В список урл добавьте ссылку с запретом из общей секции.

The WishMaster
На сайте с 29.09.2005
Offline
2542
#20

Но тут возникает вопрос - а эта штука реальность показывает или, как всегда у яндекса, фантазии?:)

123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий