вопрос про robots.txt

AN
На сайте с 19.01.2007
Offline
105
511

скажите пожалуйста вот нашел на сайте что у меня в файле robots.txt такое написонно

____

User-agent: *

Disallow: /index.php

Host: www.[блабла].com

____

это как понимать что доступ к файлу index.php запрещен? или что?

если да то почему сайт в индексе?но файла index.php нету в вебмастере

до этого крутили сайт известная фирма они это поставили не пойму зачем

partner-company.com (http://partner-company.com) доставка цветов и букетов тут (http://gala-cveti.ru)
yuz_ik
На сайте с 22.10.2009
Offline
33
#1
APCEN:
скажите пожалуйста вот нашел на сайте что у меня в файле robots.txt такое написонно

____
User-agent: *
Disallow: /index.php
Host: www.[блабла].com
____

это как понимать что доступ к файлу index.php запрещен? или что?
если да то почему сайт в индексе?но файла index.php нету в вебмастере


до этого крутили сайт известная фирма они это поставили не пойму зачем

У Вас на сайте 2 главных страницы http://site.ru/ и http://site.ru/index.php вот и закрыли чтоб небыло дублей страниц.

mursoul
На сайте с 30.09.2009
Offline
166
#2
файла index.php нету в вебмастере

Так потому и закрыли чтоб не было в индексе.

Супер трастовые ресурсы для размещения статей за копейки! (/ru/forum/798862) Скидка 20% на комплексное размещение. Рост Нч и Сч (/ru/forum/692090) Естественные ссылки. Тест услуги бесплатно. (/ru/forum/951352)
AN
На сайте с 19.01.2007
Offline
105
#3
yuz_ik:
У Вас на сайте 2 главных страницы http://site.ru/ и http://site.ru/index.php вот и закрыли чтоб небыло дублей страниц.

короче это не страшно можно так оставить?

Eventually
На сайте с 31.01.2008
Offline
68
#4
APCEN:
короче это не страшно можно так оставить?

так и нужно =)

Читайте (http://twitter.com/eventually_) Твиттер.Биржа ссылок Sape.ru (http://www.sape.ru/r.pmCLyGzJMZ.php). Автоматизируем продвижение сайтов (http://www.seowizard.ru/r.pmCLyGzJMZ.php). SMO во всей своей красе (http://forumok.com/p/a9521fec/). :)
Alex91
На сайте с 30.12.2007
Offline
258
#5
Eventually:
так и нужно =)

я думаю если и убрать, ничего страшного не случится

C Уважением, Алексей
[Удален]
#6

А в этом случае идет запрещение только этой странички /index.php или всех страничек с /index.php?p=1&sub=10

/index.php?p=1&sub=14

А то так запретишь пол сайта.

Просто тоже есть дубль главной.

Спасибо.

FladeX
На сайте с 07.11.2008
Offline
163
#7
pong 2012:
А в этом случае идет запрещение только этой странички /index.php или всех страничек с /index.php?p=1&sub=10
/index.php?p=1&sub=14

Всех этих страничек. В вашем случае надо использовать такой шаблон:

Disallow: /index.php$
Услуги посредника на бирже контента: информационные статьи 40₽/1000, «продающие» тексты 50₽/1000. Пишите в личку. Помогаю правильно переехать на https (/ru/forum/973447). Подписывайтесь на мой канал в телеграм: https://t.me/fladex (https://t.me/fladex).

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий