Яндекс и архив блога на WP

Z
На сайте с 11.09.2007
Offline
22
347

Почему Яндекс индексирует архив блога на ВордПрессе, хотя на самом блоге нет ни одной ссылки на архив, откуда Яндекс узнает о нем? Как спрятать архив блога от индексации Яндексом? Гугл архив не индексирует.

Заработок с сайта (http://www.sape.ru/r.d683495573.php) | Анализ сайта (http://kompinfo.com/analiz-saita.php) | Хостинг sweb.ru (http://www.sweb.ru/cgi-bin/pg.cgi?pin=8911)
Light Phantom
На сайте с 17.03.2007
Offline
188
#1

В robots.txt закройте от индексации

User-agent: Yandex

Disallow: /запрещаемый_к_индексации_каталог_или_файл

Если для всех поисковиков, то:

User-agent: *

Disallow: /запрещаемый_к_индексации_каталог_или_файл

Z
На сайте с 11.09.2007
Offline
22
#2

Light Phantom, спасибо.

Но откуда Яндекс узнает об этих страницах, если на них нет ни одной ссылки?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий