Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Закрыть каталог от индексации

VM
На сайте с 23.09.2009
Offline
192
vip-moto
528

Итак нужно закрыть

/xfsearch/ и все что за ним от индексации

Disallow: /xfsearch*

Disallow: */xfsearch/*

Вбил, а он все равно его индексирует:madd:Че за хрень?

ValD
На сайте с 14.06.2007
Offline
146
ValD
#1

Попробуйте

Disallow: /*xfsearch

Ну или полностью урл напишите, а заодно и как проверяется это "всё равно индексирует".

VM
На сайте с 23.09.2009
Offline
192
vip-moto
#2
ValD:
Попробуйте
Disallow: /*xfsearch

Ну или полностью урл напишите, а заодно и как проверяется это "всё равно индексирует".

попробуюю... 1 вижу страницу в вебмастере, 2 ввожу саму страницу в поиске, и он выводит информацию с ней

DP
На сайте с 22.02.2015
Offline
32
DmitriyPopov
#3

1. В поиск данные пролезают не моментально, и тем более в вебмастер. Возможно просто ваши изменения еще не дошли до индекса.

2. Проверьте валидатором в вебмастере "примеры страниц" для вашего robots.txt - если он показывает что они закрыты - то из поиска они уйдут. Пока что да, к сожалению, не моментально.

Когда-то руководитель группы сервисов для веб-мастеров Компании "Яндекс"
Как добавить 500 страниц Квота на индексацию? Как насильно выкинуть из
D.iK.iJ
На сайте с 26.05.2013
Offline
239
D.iK.iJ
#4

Всегда делаю так:

User-agent: *

Disallow: /xfsearch

Адаптивный дизайн в 2 строчки ( https://dikij.com/wm/adaptaciya-saytov.php ). + Принимаю заказы любой сложности ( https://searchengines.guru/ru/forum/926323 ). 💎 Еще я делаю классные кулоны с опалами ( https://mosaicopal.ru/ ).

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий