Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Роботы не ходят по ссылкам, Help!

G
На сайте с 16.02.2004
Offline
0
gobz
609

недавно написал движок на php + MySQL для сайта http://taliy.ru/ на котором до этого было около двух тысяц статичных страниц .html

теперь адреса страниц изменились и стали выглядеть как www.сайт.ру/страна/город/название_чего-то (без расширений вообще), так называемый ЧПУ через 404-ую ошибку:

то есть в качестве ErrorDocument 404 указан /index.php, который разбирает URL и выдает нужный результат с кодом 200.

теперь проблема: идекс уже скачали и Яндекс и Гугль а вот дальше по ссылкам ни тот ни другой не пошел.

Подскажите пожалуйста, где грабли?

K
На сайте с 31.01.2001
Offline
737
Kost
#1

Когда скачали index?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
G
На сайте с 16.02.2004
Offline
0
gobz
#2

Когда скачали index?

Яндекс, последний раз сегодня, насколько я понял, первый раз - с неделю назад.

Все поисковики отметились уже давно(смотрел в логах по User-Agent и по обращению к robots.txt). Яндекс и Гугль скачивали индекс уже по несколько раз(смотрел каждый день что у них в кеше)

Как часто снимать статистику Яндекс кобласит Упал доход
Ayavryk
На сайте с 11.10.2003
Offline
209
Ayavryk
#3

Робот и не должен идти дальше - он же получил от вас 404 ошибку - страницы нет.

Переделайте ЧПУ через modrewrite и будет вам щастье

Тынгыр, мынгыр, комсомол (http://erum.ru). Ехари, ехари, (жалобно) аяврик. /народная тунгусская песня/
G
На сайте с 16.02.2004
Offline
0
gobz
#4
Как писал Ayavryk
Робот и не должен идти дальше - он же получил от вас 404 ошибку - страницы нет.
Переделайте ЧПУ по-человечески через modrewrite и будет вам щастье

ЧПУ работает нормально, все ответы по новым ссылкам = "200 ок"

проверял.

и в Яндексе в т.ч. ("Ваша страница глазами Яндекса:

http://www.yandex.ru/cgi-bin/urlstat?url=http%3A%2F%2Ftaliy.ru%2Faustria&Submit=%CF%F0%EE%E2%E5%F0%E8%F2%FC+%EF%F0%FF%EC%EE+%F1%E5%E9%F7%E0%F1%21")

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий