Конечно же, смысл есть, но очень мало каталогов размещают ссылку на внутренние страницы (папки) сайта...
robots.txt неправильный. Вы ведь не только для Яндекса его пишете, верно?
/ru/forum/86666
Насчет header(...) - действительно может не работать… извините...
Не уверен, что поможет, но можно попробовать…
1. Пропишите в самом начале вывода страниц следующее:
<? header("HTTP/1.1 200 OK"); ?>
При этом по адресу Вашего сайта (как с большой буквы так и с маленькой) должен отдаваться заголовок: HTTP/1.1 200 OK а не HTTP/1.1 403 Forbidden, как сейчас.
2. Создайте файл robots.txt и пропишите в нем директиву host: www.site.ru Этим Вы "попросите" Яндекс переопределить основной хост (на адрес сайта с маленькой буквы).
Покажите урл, если хотите получить нормальный ответ
Для более точного ответа покажите урл...
Может у кого-то, кто заходил на сайт, Гугл бар стоит или Гугл где-то ссылку на внутреннюю страницу нашел... вот и проиндексировал.
1. На главной странице сайта кроме флеша и ссылки на студию дизайна :) ничего нет.
2. На Ваш сайт Яндекс нашел только 5 ссылок и все они стоят на главную страницу.
В связи с тем, что Яндекс, как и другие поисковики, не индексирует флеш - Ваш сайт не проиндексирован. Поисковики просто не знают о существовании внутренних страниц Вашего сайта.
Зависит от зоны домена... whois
Скорее всего причина не в этом. Бывает, что на всех страницах сайта одинаковые title, description, keywords, но они не склеиваются.
С чего Вы взяли, что страницы склеены?
Оставьте для робота только страницы с основной сортировкой, все остальные запретите к индексации.
За незакрытые от индексации страницы поиска на сайте были даже случаи бана.
