<b>Помогите с управлением индексации доменов</b>

Вы наделись что тут болд в заголовках поддерживается?

думал что да =) но не суть вопроса в болдах, а суть в том как мне сделать то о чем я писал выше...?

1. Создаем файлик robots.txt

User-agent: Yandex

Host: site.ru

SiteMap: site.ru/sitemap.xml

Это для Яшки :)

2. Создаем файлик .htaccess

В нем делаем 301 редирект не основного домена на основной...

Нужно чтобы 2 сайта были доступны пользователям, а для поисковиков только один. То есть редиректы применять нельзя. Я думал может можно отдавать при заходе на домен№1 файлик роботс.тхт№1 и при заходе на домен№2 - роботс.тхт№2. Или может где-то в контрол панелях вебмастера есть функция которая позволит оставить проиндексированным только один сайт....?

На открытом для индексации:

User-agent: Yandex

Disallow:

Sitemap: http://site.ru/sitemap.xml

Host: site.ru

User-agent: *

Disallow:

Sitemap: http://site.ru/sitemap.xml

На закрытом для индексации:

User-agent: *

Disallow:/

Выдавать разные robots.txt через mod_rewrite.

А можно подробнее, а то я не силен в этом... :-[ Допустим есть сайт который нужно закрыть от индексации - site1.com и второй, который нужно оставить открытым - site2.com

Что именно надо писать в .htaccess ?

acid_house добавил 24.03.2010 в 22:09

Допустим я создам файлы robots-site1.com.txt и robots-site2.com.txt. В первом я закрываю от индексации, а во фтором индексация открыта. И в .htaccess пишу:

RewriteCond %{REQUEST_FILENAME} /robots.txt$ [NC]

RewriteRule ^ /robots-%{HTTP_HOST}.txt [L]

Я прав?

acid_house, как-то так, да.

Jet D., Спасибо, буду тестировать.

не понял, или не так прочитал

а зачем .htaccess ?

зачем разные имена роботс?

robots.txt так и должен называться

нужный роботс должен лежать в корневой директории нужного сайта

там где не надо индексировать, создаете robots.txt с запретом и кидаете в корень

jaypi, Вы не поняли, у ТС сайты оба сайта лежат в одной папке, т.е. фактически сайт один, а домены - алиасы.