Форум Сайтостроение Веб-строительство

Вопрос по robots.txt

вувф
На сайте с 22.05.2011
Offline
132
вувф
475

Грызут сомнения, так как Google пару месяцев ругается...

Структура сайта

site.ru/contact

site.ru/contact/1

site.ru/contact/2

и т.д.

папку contact - разрешаем, а страницы 1, 2, 3 и т.д. запрещаем к индексации.

У меня сейчас так:

User-agent: *

Disallow: /contact/*

Вроде правильно, но лучше переспрошу.

LovelAss
На сайте с 05.06.2009
Offline
96
LovelAss
#1

Allow: /contact/$

Disallow: /contact/

P.S. Ваш вариант тоже верный, но адрес site.ru/contact/ не будет проиндексирован.

M
На сайте с 04.12.2013
Offline
223
miketomlin
#2

А у него не /contact/, а /contact, так что все ОК.

---------- Добавлено 24.10.2015 в 15:37 ----------

вувф, звездочка не обязательна (пример). Тоже масса закрытых страниц за /contact/, при этом /contact в индексе и у яши, и у гоши.

Домены и скрипт для коротких ссылок: https://u75.ru/domains-for-shortcuts
location.href на js не Проблемы с выводом денег Сильное обновление Гугл. Часть
SeVlad
На сайте с 03.11.2008
Offline
1609
SeVlad
#3
вувф:
Вопрос по robots.txt

Как же вы утомили.. Нет слов..

Тут технический раздел. Технический а не сеошный!

Если не в состоянии найти закреплённый топик по робостсу - зачем вы вообще этим занимаетесь?

Делаю хорошие сайты хорошим людям. Предпочтение коммерческим направлениям. Связь со мной через http://wp.me/P3YHjQ-3.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий