- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте, уважаемые.
Проблема... как в robots.txt закрыть от индексации страницы типа: http://site.ru/page/#comment-13015, т. е. страницы комментариев...?
Добавляю, к примеру, Disallow: /#comment/... закрывает все страницы (при проверке Яндекс.Вебмастером пишет "запрещен правилом /")
Добавляю Disallow: /comment/... все разрешает.
Как быть???
Заранее спасибо!
А так ? Disallow: /*comment
Попробуйте так:
страницы типа: http://site.ru/page/#comment-13015, т
Поисковики отбрасывают все, начиная с #, поэтму не парьтесь, не закроете.
Даже не поисковики, а на более высоком уровне HTTP-стандартов все лишнее отбрасывается.
Стоп. А покажите-ка реальную страницу. На # же внутренние метки начинаются.
aka_Puhh, Ne&Co, к сожалению не помогает...
Kost, что Вы имеете ввиду под "отбрасывают"? В смысле не индексируют? Я то хочу закрыть эти страницы, т. к. слишком много дублей получается...
что Вы имеете ввиду под "отбрасывает"? В смысле не индексирует?
При обработке URL в нем отбрасывается все, начиная с #.
Для поисковиков http://site.ru/page/#comment-13015 то же самое, что и
http://site.ru/page/
http://www.faqs.org/rfcs/rfc1738.html - информация к размышлению, символа # в URL быть не может.
Kost, спасибо большое, я понял..
У меня тоже небольшая просьба по тому что именно нужно написать в этом файле.
Нужно чтобы сайт хорошо индексировался поисковиками.
Дело в том что вот уже года 2 этого файла у меня нет совсем, я незнал что этот файл имеет большое значение для самого сайта.
Сам сайт на движке dataLife Engine.
Заранее балгоадрен
AggreSSor RAPa, http://help.yandex.ru/webmaster/?id=996567