Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Гугл не слушается роботса или я туплю?

S
На сайте с 30.09.2009
Offline
116
stroydomen
631

Друзья. Подскажите плиз. Есть роботс.тхт

Что я не так делаю? Гугл проиндексировал страницу в папке regcat

Подскажите плиз. 


User-agent: Yandex

Disallow: /inc

Disallow: /contacts/sendmail

Disallow: /regcat

Disallow: /partners/admin

Host: www.italon.ru



User-agent: *

Disallow: /inc

Disallow: /contacts/sendmail

Disallow: /regcat

Disallow: /partners/admin
Перелинковку сделал. Теперь думаю куда потратить денежки - сапа, мира или блоги :)
K
На сайте с 31.01.2001
Offline
737
Kost
#1
stroydomen:
Гугл проиндексировал страницу в папке regcat

1) Давайте ссылку на выдачу гугла.

2) Этот robots ?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
S
На сайте с 30.09.2009
Offline
116
stroydomen
#2
Kost:
1) Давайте ссылку на выдачу гугла.
2) Этот robots ?

1. дал в лс

2. нет, не этот

Ответьте пожалуйста, если знаете ответ :)

K
На сайте с 31.01.2001
Offline
737
Kost
#3

Не консультирую, это интересно всем.

S
На сайте с 30.09.2009
Offline
116
stroydomen
#4
Kost:
Не консультирую, это интересно всем.

Понятно. Я думал Вы спросили, чтобы помочь.

O
На сайте с 02.06.2006
Offline
67
oldvovk
#5

Если не ошибаюсь, директории закрываются так

Disallow: /regcat/

А просто файл так

Disallow: /regcat

Хотя поисковики и по своему могут страктовать, лучшее перечитать рекомендации google

V2
На сайте с 16.07.2009
Offline
112
vital2k
#6

Проверьте в панели вебмастера гугла, запрещён ли к индексации данный урл. Если запрещён, то должее вылететь со временем. Было такое недавно - адреса запрещённые к индексации (вебмастер показывал запрет), гугл проиндексировал, потом они исчезли из индекса.

Яндекс Вебмастер сообщит о Обновился раздел «Исключенные страницы» Google официально анонсировал отчет
Nunan
На сайте с 15.08.2008
Offline
78
Nunan
#7 

Disallow: /regcat
написано правильно, в конце / не обязателен

Дополнительно все страницы в regcat можно снабдить мета-тегом

<meta name="robots" content="noindex,nofollow" />

https://maker.su/

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий