Удалить каталог из индекса Google

G4
На сайте с 22.08.2010
Offline
13
1199

Добрый день. Несколько месяцев пытаюсь вывести папку форума из индекса Google.

Создал robots.txt с содержанием:

User-agent: Yandex
User-Agent: Googlebot
Disallow: /forum/

Добавил сайт в Google Webmaster и воспользовался функцией Remove URL

Пробывал создать каталог с файлом .htaccess:

Order deny,allow
Deny from all

Заметил,что при вводе запроса site:*********.ru в Google, на первой странице выводится:

About 2,680 results (0.06 seconds)

После перехода на последнюю (28-ю страницу) выводится:

Page 28 of 276 results (0.16 seconds)

Т.е фактически страницы удалены, но не полностью.

Как полностью исключить папку /forum/ из индекса?

K
На сайте с 31.01.2001
Offline
737
#1

Обратите внимание, что строка

Disallow: /forum/

НЕ запрещает индексацию страницы

/forum

Если ее тоже надо запретить, так и напишите:

Disallow: /forum

И еще. Вы можете запретить роботу ходить на страницы форума. Но вы не можете запретить ему подсчитывать адреса разных страниц форума, если на них есть ссылки с вашего сайта или с других сайтов.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий