Проблемы при индексировании...

FM
На сайте с 13.04.2004
Offline
2
541

Сегодня по сайту прошелся яндекс...

зацепил много хороших ссылок...

но помимо ссылок вида http://djpro.ru/equipment-78.htm он еще зацепил и ссылки которых поидее нет... (например http://www.djpro.ru/index.php/index-single-25.htm )

Почему такое произошло?

PS rambler точно также отчебучил...

D
На сайте с 23.11.2003
Offline
167
dmt
#1

Значит такая "поидее" есть. Ищи.

FM
На сайте с 13.04.2004
Offline
2
#2

а как-нибудь этот поиск можно автоматизировать?

а то я ищу... а найти не могу...

FM
На сайте с 13.04.2004
Offline
2
#3
wolf
На сайте с 13.03.2001
Offline
1183
#4
но вот http://www.djpro.ru/index.php/music...pic.php?pid=171 вообще в природе не существует...

Коли не существует, так честно отдавай 404 Not Found, а не 200 OK, и не фиг ботам голову морочить...

Сергей Людкевич, независимый консультант, SEO-аудиты и консультации - повышаю экспертность SEO-команд и специалистов ( http://www.ludkiewicz.ru/p/blog-page_2.html ) SEO-блог - делюсь пониманием некоторых моментов поискового продвижения ( http://www.ludkiewicz.ru/ )
FM
На сайте с 13.04.2004
Offline
2
#5

Сорри за неграмотность... но как это сделать???

D
На сайте с 23.11.2003
Offline
167
dmt
#6

хедер послать

если php то:

http://www.php.net/header

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий