Угу :)
Теперь всё довольно-таки кучеряво :)
Тьфу 3 раза
не отследил вовремя так как не ждал индексации
Таких слов всего 2 варианта:
"www.btr.ru" и "смотреть сайт>>"
Существует мнение, что роботы некоторых поисковиков плохо индексирую
Часть современных сайтов построены на основе систем управления контентом, имеющих такой недостаток - они плохо индексируются некоторыми поисковиками из-за сложных адресов страниц, подобных этому:
http://www.yoursite.com/comments.php?id=1_0_1_0_C
Проблема в том, что такой адрес содержит символы ? # & =
Поисковые роботы, которые индексируют сайт не могут "переварить"
такие адреса и страницы не попадают в поисковик.
Но в некоторых из систем, эта проблема решена. Адреса на лету преобразуются в такой формат:
http://www.yoursite.com/comments/1_0_1_0_C/
То есть в нем кроме букв и цифр есть только косая черта, которую
понимает любой поисковый робот и страницы индексируются на "ура".
Вот эта фича и называется "searchengines friendly urls"
У меня форум не индексировался из-за этого около года
Спасибо огромное :)
Очень помогли :) Всяческих удач :)
Не запретит ли команда
Disallow: /index.php/pmm/toi/
индексацию уровня /index.php/ в том случае, если robots.txt лежит в корне сайта
уж очень боязно запретить то, что необходимо индексировать...
А не дадите ссылочку на тот совет?
Спасибо за ответ