Вопрос по Sitemap

211

Talisman13

23 октября 2008, 07:43

#11

lap09, попробуйте так сделать:

User-agent: Yandex

Disallow:

Host: www.site.ru

User-agent: Googlebot

Disallow:

Sitemap: http://site.ru/sitemap.xml.gz

User-agent: *

Disallow:

И потом проверьте как происходит анализ всего этого на гугл вебмастере.

178

nik_kent

23 октября 2008, 07:43

#12

Извиняйте за описку: конечно User-agent!

Прописать вот так:

nik_kent:
User-agent: *
Disallow:

Sitemap: http://***.ru/sitemap.xml.gz

PS Ну или так, как сказал Talisman13 :)

С уважением, Николай.

211

Talisman13

23 октября 2008, 07:47

#13

nik_kent, просто вам совет: если делаете блок для какой-то ПС, то надо указать что это для такой-то ПС.

А в последнем блоке сделать для всех оставшихся ПС.

178

nik_kent

23 октября 2008, 07:50

#14

Talisman13:
nik_kent, просто вам совет: если делаете блок для какой-то ПС, то надо указать что это для такой-то ПС.
А в последнем блоке сделать для всех оставшихся ПС.

Разве будет какая-то разница между нашими двумя вариантами, если не думать о директиве host?

И кстати, можно еще вопрос: User-agent - это все-таки обязательная строчка? Раньше как-то не задумывался, что robots можно писать без нее:)

NGINX + PHP-FPM Упал доход Упал траф с Гугла

211

Talisman13

23 октября 2008, 07:53

#15

nik_kent:
И кстати, можно еще вопрос: User-agent - это все-таки обязательная строчка?

Обязательная.

Почитайте вот это для развития и понимания работы.

178

nik_kent

23 октября 2008, 07:56

#16

Talisman13, благодарю.

Читал и это и аналог на Яндексе.

192

lap09

23 октября 2008, 10:08

#17

Ура! Помогло. Спасибо, Talisman13.

Все что нужно знать о DDоS-атаках грамотному менеджеру

Вышел новый Яндекс Браузер с YandexGPT и YandexART