robots

H

55

holovla

22 апреля 2009, 16:24

308

Подскажите пожалуйста при составлении роботс тхт что не нужно чтобы индексировал робот?

Картинки нужно или нет?Только сами страницы ? все остальное запрещать??

172

Cranking

22 апреля 2009, 16:41

#1

Картинки нужно и всё что есть на сайте тоже нужно. Не нужно индексировать страницы для печати и разделы сайта со скриптами и статистикой.

Аудит сайта и консультации по продвижению и оптимизации. (/ru/forum/568390) Дешевле чем у других форумчан на форуме, много отзывов (моя тема)

S3

0

silent.3w

22 апреля 2009, 17:02

#2

например самое элементарное, спрятать надо профили юзверей если таковые имеются, страницу с поиском, календарь и все в таком духе

370

kimberlit

23 апреля 2009, 04:06

#3

Cranking:
и разделы сайта со скриптами и статистикой

Это ещё что такое? Что за разделы со скриптами и статистикой?

holovla, запрещайте страницы с дублирующим контентом ...

W

142

Webexpert

23 апреля 2009, 04:55

#4

holovla:
Подскажите пожалуйста при составлении роботс тхт что не нужно чтобы индексировал робот?

То, что Вы не хотите, чтобы было в выдаче.

И посмотрите общие моменты работы с файлом robots.txt - http://robotstxt.org.ru/

Миледи: интернет-магазин украшений с природными камнями (https://milady-24.ru/)