mod_rewrite и robots.txt

AG
На сайте с 24.04.2007
Offline
115
783

если через mod_rewrite изменен урл с index.php например на index.html, какую страницу закрывать в robots.txt, с .html или с .php ?

Спасибо.

Куплю ссылки - промышленность, производство. Пишите в ЛС.
E0
На сайте с 07.03.2007
Offline
13
#1

в этом случае стоит закрыть index.php

Каталог бесплатных CMS (http://catalogcms.ru)
Shtogrin
На сайте с 02.11.2006
Offline
95
#2

Редирект внешний или внутренний?

www.shtogrin.com (http://www.shtogrin.com/). Канцтовары (http://www.invit.com.ua/). 1С Бухгалтерия (http://account.kiev.ua/).
E0
На сайте с 07.03.2007
Offline
13
#3
Shtogrin:
Редирект внешний или внутренний?

mod_rewrite ведь

Shtogrin
На сайте с 02.11.2006
Offline
95
#4
eck0:
mod_rewrite ведь

поэтому и спрашиваю

AG
На сайте с 24.04.2007
Offline
115
#5

RewriteEngine On

RewriteRule ^(.*)_(.*)\.html$ $1.php?id=$2

RewriteRule ^(.*)\.html$ $1.php

Shtogrin, вас мучал с ним :). Редиректа нет

Shtogrin
На сайте с 02.11.2006
Offline
95
#6

AlexGM, можно закрыть файлы .php. На них были внешние ссылки? Тогда закрывать не надо, а сделать редирект c [R], на новые адреса, что-то типа

RewriteRule ^news.php$ /news.html [R=301,L]

AG
На сайте с 24.04.2007
Offline
115
#7
Shtogrin:
AlexGM, можно закрыть файлы .php. На них были внешние ссылки? Тогда закрывать не надо, а сделать редирект c [R], на новые адреса, что-то типа
RewriteRule ^news.php$ /news.html [R=301,L]

Нет сылок не было, более того сайт еще даже не в индексе.

Поэтому и спросил, что нужно закрыть.... хотя в голову пришла мысль просто <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> прописать.

Shtogrin
На сайте с 02.11.2006
Offline
95
#8
AlexGM:
хотя в голову пришла мысль просто <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> прописать.

Не совсем удачная мысль.

Во-первых, надо анализировать адрес и если адрес ".*php", тогда писать иначе нет, так как скрипт то один.

Во-вторых, робот должен забрать файл и тогда только увидит, что его нельзя индексировать. robots.txt - более логично.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий