Два robots.txt в одном каталоге

.htaccess + php

а можете чуть подробнее рассказать?

Может вам еще ключ от квартиры? :D

Ну ок, примерно так:

.htaccess

RewriteEngine On

RewriteRule ^robots.txt /robots.php [L]

robots.php

<?php



header('Content-Type: text/plain');



if ($_SERVER['HTTP_HOST'] == 'site1.ru' || $_SERVER['HTTP_HOST'] == 'www.site1.ru')

{

?>

User-agent: *

Disallow: /123/

Host: www.site1.ru

<?php

}



else



{

?>

User-agent: *

Disallow: /456/

Host: www.site2.ru

<?php

}



?>

На работоспособность не тестировал, писал прям в форме ответа.

RewriteEngine On

RewriteRule ^robots.txt /robots.php [L]

<?php



header('Content-Type: text/plain');



if ($_SERVER['HTTP_HOST'] == 'site1.ru' || $_SERVER['HTTP_HOST'] == 'www.site1.ru')

{

?>

User-agent: *

Disallow: /123/

Host: www.site1.ru

<?php

}



else



{

?>

User-agent: *

Disallow: /456/

Host: www.site2.ru

<?php

}



?>

ключ не нужен, спасибо)))

буду разбираться

Кстати, вот нашел более элегантный вариант (чтоб php не дергать) - http://blog.cherouvim.com/robotstxt-control-for-host-aliases-via-mod_rewrite/

RewriteEngine On

RewriteRule ^robots.txt /robots.php [L]

<?php



header('Content-Type: text/plain');



if ($_SERVER['HTTP_HOST'] == 'site1.ru' || $_SERVER['HTTP_HOST'] == 'www.site1.ru')

{

?>

User-agent: *

Disallow: /123/

Host: www.site1.ru

<?php

}



else



{

?>

User-agent: *

Disallow: /456/

Host: www.site2.ru

<?php

}



?>

Спасибо вам огромное. Очень подробно все описано.

вот еще похожее решение: http://zya.su/archives/11

Почему бы не использовать <META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW"> для "лишних" страниц?

мне кажется это менее красивое решение - особенно если таких страниц много. кроме того тут не пропишешь правил, обрезающих хвосты в каталогах например.

Наверное Вы правы.

Но я вообще сомневаюсь, что может быть красивый костыль из .htaccess для 2-х сайтов в одной директории. Первоначальное решение кривое само по себе.