Закрыта ли главная страница сайта от индексации?

TO
На сайте с 21.09.2007
Offline
170
364

Начал сейчас анализ одного конкурентного сайта, который практически по всеми интересующим меня запросам держится на 1 месте. Сначала посмотрел на внутреннюю оптимизацию, и с самого начала меня смутил robots.txt.

Он выглядит вот так:

Disallow: /index.php

Disallow: /send.php

Disallow: /includes/

Disallow: /search

Disallow: /mainpage/

User-agent: Yandex

Disallow: /index.php

Disallow: /send.php

Disallow: /includes/

Disallow: /search

Disallow: /mainpage/

Host: *******.com

Здесь закрыта от индексации главная страница index.php что ли? То, что главная именно index.php, а не index.html и прочее, я проверил.

Конечно, может быть в htaccess прописана стартовая страница с совершенно другим именем, а это сделано, чтобы сбить таких как я с толку, но мало ли.

K
На сайте с 31.01.2001
Offline
737
#1

Не, главная страница - это www.site.ru/ , а www.site.ru/index.php - ее дубликат.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
D
На сайте с 25.10.2007
Offline
12
#2

на самом деле главная странитца не закрыта, поскольку она имеет УРЛ вида www.site.com, а закрыта страница вида www.site.com/index.php - скорее всего она является дублем главной страницы поетому ее и закрыли.

Жизнь дана нам одна и прожить ее нужно достойно. (http://www.catalogue.biz.ua)
TO
На сайте с 21.09.2007
Offline
170
#3

Все ясно.

Это как с поддоменами - закрываем от индексации папку, в которой поддомен лежит.

Спасибо

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий