gy7uk1: Или может быть у вас есть какие-то другие мысли по этому поводу.
Вобщем если у кого-то есть практических опыт решения подобных задач, прошу поделиться дельными советами
рекомендую также сделать редирект дублей одной и той же страницы на основной ее адрес
ТС, может все-таки .htaccess поиграете?
через .htaccess он закроет(изменит) доступ к index.php - как Вы себе это представляете?
Так Вы запретите индексацию и страниц вроде: news/index.php, articles/index.php и т. д.
Мне необходимо закрыть от индексации урлы всех страниц начинающихся с index.php
10символов
Disallow: /*index.php?
Еще раз повторяю, подобным методом вы потеряете для Яндекса все ссылочное со старого домена.
Траф и гугла - основной источник
10 символов
Учтите, что хорошо структурированный документ может(должен) получать преимущество, даже если непосредственно тэги роли не играют.
ценная мысль, беру на заметку..))
Iren, значит пустая строка перед Host нужна? спасибо за предидущий ответ
- да
- системные дир. и файлы в Disallow моня не ставить - они дефолтом игнорируются
- лучше по маске Disallow проставьте..
Вот мой robot.txt
User-Agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /trackback/
Disallow: /feed/
Disallow: /tag/
Disallow: /comment/
Disallow: /forum
Disallow: /comments/
Disallow: *?feed=
Disallow: *?s=
User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /trackback/
Disallow: /feed/
Disallow: /tag/
Disallow: /comment/
Disallow: /forum/
Disallow: /comments/
Disallow: *?feed=
Disallow: *?s=
Host: ****.ru
Sitemap: http://****.ru/sitemap.xml
"немного" исправила..((
Или может быть у вас есть какие-то другие мысли по этому поводу.
Вобщем если у кого-то есть практических опыт решения подобных задач, прошу поделиться дельными советами
рекомендую также сделать редирект дублей одной и той же страницы на основной ее адрес
В robots.txt прописываете «Hots: нужный_домен». А в .htaccess старого домена ставите 301 редирект на новый домен. Ждёте…
если со справкой,то можно не ждать..
Seo-пограничники, охраняют кэш от пробития ))
seграничники ..))