Sitemap в robots.txt

12
[Удален]
#11
Mishiko:
там тоже можно указать нахождение файла

точнее только там и нужно, при этом его не надо называть sitemap.xml ;)

Chained
На сайте с 10.01.2013
Offline
92
#12

Как поисковики индексируют сайт, при наличии sitemap.xml - они берут страницы только оттуда, или таки обходят весь сайт по ссылкам, начиная с главной, чтобы быть может найти что-то еще, что в сайтмап не попало?

F
На сайте с 13.11.2009
Offline
269
#13
Chained:
Как поисковики индексируют сайт, при наличии sitemap.xml - они берут страницы только оттуда, или таки обходят весь сайт по ссылкам, начиная с главной, чтобы быть может найти что-то еще, что в сайтмап не попало?

Разумеется, боты не перестанут ходить по ссылкам на сайте. Сайтмап полезен для ускорения индексации страниц, которые далеки от главной.

Mishiko сморозил так сморозил

Roousk
На сайте с 07.10.2012
Offline
58
#14

в любом случае добавляйте, для индексации будет плюс, а если захотят спарсить - то это сделают. прогоните через твиттер, если хотите чтоб Яшка лучше кушал страницы

A
На сайте с 31.12.2012
Offline
6
#15

я добавляю в роботе, а потом ещё урл на карту в я.вебмастер добавляю.

Hektorsweb
На сайте с 02.11.2008
Offline
118
#16
aminish:
я добавляю в роботе, а потом ещё урл на карту в я.вебмастер добавляю.

Правильный подход )

Да, реально правильный. Кто его знает, в каком порядке яндекс смотрит?

Да и не яндексом единым... другие поисковые системы тоже любят по картам ходить.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий