Вопрос по robots.txt

ivmas, а когда вы это прописали в robots.txt?

удалите через вебмастер

Месяца 3 назад прописал robots

У меня с главной страницы идет ссылка на "пользователи" /users/

В индексе есть страница users, а все остальные пользователи не в индексе.

Disallow: /users/

А я хочу, что бы и этого раздела в индексе не было. Так как очень важно с главной страницы передавать вес куда нужно.

Выдается Title и есть сохраненная копия?

Да. Но только одной страницы. Пользователей много на сайте, их в индексе нету. А вот именно страница site.ru/users есть в индексе (тайтл и сохр. копия) и в гугле и яндексе, как не странно

Если вы запретили /users/, то /users не запрещено индексировать.

/users/ не является подстрокой /users .

А что вас удивляет?

Простите за мою без грамотность, а как убрать тогда и страницу users с индекса?

Что нужно прописать в robots.txt ? Так как у меня таких страниц много! Нужно это скорее сделать. Спасибо

Как ни странно,

Disallow: /users

Открою страшную тайну. Чтобы запретить индексацию страницы, нужно написать ее адрес после директивы Disallow (и ничего не дописывать в конце ее адреса!).

Почему вы путаетесь в показаниях? Каких страниц много?

В гугл веб мастер есть такая возможность Конфигурация сайта >Доступ для сканера> Удалить URL

пишете users и вибираете Удалить каталог

И все ссылки, что начинаеться на users будут удалены на следующий день.

В яндексе не сталкивался, должно быть аналогично

Понял, всего лишь убрать косую.

Да есть страницы, аля "site.ru/pravila.html", "site.ru/o-proekte.html" и т.д. Ссылки на них есть на главной странице, а мне их закрыть нужно! Теперь ясно, что нужно не так

Disallow: /passremind.html/

Disallow: /pomosch.html/

Disallow: /my.html/

Disallow: /pravila.html/

Disallow: /kontakty.html/

Disallow: /o-proekte.html/

А вот так

Disallow: /passremind.html

Disallow: /pomosch.html

Disallow: /my.html

Disallow: /pravila.html

Disallow: /kontakty.html

Disallow: /o-proekte.html

Я правильно все понял?!