Запретить доступ к файлам sitemap. Как?

A4
На сайте с 15.08.2013
Offline
128
1019

Доброго дня вебмастера! Как запретить пользователям доступ к файлам sitemap на сайте, но при этом чтобы поисковики имели полный доступ к данным файлам?

Мы жили бедно, а потом нас ограбили.
S
На сайте с 29.01.2006
Offline
404
#1

В htaccess разрешить доступ к этим файлам только с определённых IP (нужно знать IP поисковиков).

A4
На сайте с 15.08.2013
Offline
128
#2
Scaryer:
В htaccess разрешить доступ к этим файлам только с определённых IP (нужно знать IP поисковиков).

Интересно, списки ip гуглить?

A
На сайте с 22.11.2012
Offline
80
#3

Или: Сделайте адрес карты сайта не стандартным.

К примеру имя-сайта.ru/jhekjwherkjwher.xml И скормите такую ссылку поисковикам (в кабинете вебмастера). Пользователи не подберут такую ссылку.

A4
На сайте с 15.08.2013
Offline
128
#4
Alchemis:
Или: Сделайте адрес карты сайта не стандартным.
К примеру имя-сайта.ru/jhekjwherkjwher.xml И скормите такую ссылку поисковикам (в кабинете вебмастера). Пользователи не подберут такую ссылку.

Я думал добавить все сайтмапы в роботс, поэтому встала необходимость запрета именно на них..

A
На сайте с 22.11.2012
Offline
80
#5

Если вы хотите постоянно отслеживать все изменения в ip адресах роботов и корректировать настройки, то .htaccess самое то.

"Я думал добавить все сайтмапы в роботс" - добавив в кабинет вебмастера информацию о картах надобность прописывать их в роботс пропадет.

p.s Это всего лишь один из вариантов. Решать Вам )

B4
На сайте с 27.04.2012
Offline
94
#6
Alchemis:
Или: Сделайте адрес карты сайта не стандартным.
К примеру имя-сайта.ru/jhekjwherkjwher.xml И скормите такую ссылку поисковикам (в кабинете вебмастера). Пользователи не подберут такую ссылку.

не спасет:

site:site.ru .xml

ockuja
На сайте с 02.08.2014
Offline
69
#7

Нафига вообще такие свистопляски?

A4
На сайте с 15.08.2013
Offline
128
#8
Alchemis:
Если вы хотите постоянно отслеживать все изменения в ip адресах роботов и корректировать настройки, то .htaccess самое то.

"Я думал добавить все сайтмапы в роботс" - добавив в кабинет вебмастера информацию о картах надобность прописывать их в роботс пропадет.

p.s Это всего лишь один из вариантов. Решать Вам )

понял, спасибо, тогда не будем действительно заморачиваться, а добавим карты в поисковики.

A
На сайте с 22.11.2012
Offline
80
#9
bulatbulat48:
не спасет:

site:site.ru .xml

У сайтов, xml карта которых попала в выдачу ссылка на неё указана либо на страницах сайта, либо в robots.txt.

Предполагаю, что если нигде не будет указан путь или ссылка до sitemap, то в выдаче она не появится.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий