Google не правильные адреса 404 ошибка

M
На сайте с 16.07.2010
Offline
149
591

Хочу задать вопрос помогите не понятное с сайтом

Google не правельно сканирует адреса например или сайт генерирует эити ссылки и потому 404 ошибок много стало например

http://site.com/search/search/Muse

В адресе почему 2 раза то дублируется слово /search/search/

Правильно должно быть так

http://site.com/search/Muse

Понятно что это с движком что то не так разобраться не получается, может кто то знает как можно исправить с помощью .htaccess или как то запретить Google сканировать те адреса с дублирующем словом /search/search/ а то из за этого стало 404 ошибок много

И еще Google почему то сканирует папку web/js/jPlayer/ плеера http://site.com/web/js/jPlayer/ можно как то запретить сканировать эту папку

Заранее благодарю

Download Music Mp3 (http://google.co.il)
siv1987
На сайте с 02.04.2009
Offline
427
#1

Капайте в сторону относительных адресов http://htmlbook.ru/samhtml/ssylki/absolyutnye-i-otnositelnye-ssylki

G0
На сайте с 10.08.2013
Offline
12
#2

Что мешает закрыть директории для роботов?

M
На сайте с 16.07.2010
Offline
149
#3
Gug007:
Что мешает закрыть директории для роботов?

А как закрыть подскажите если можно просто я не знаю как закрывают

G0
На сайте с 10.08.2013
Offline
12
#4
megallodon:
А как закрыть подскажите если можно просто я не знаю как закрывают

вот была тема /ru/forum/351925

WebAlt
На сайте с 02.12.2007
Offline
266
#5

User-agent: *

Disallow: /web/

Disallow: /search/

M
На сайте с 16.07.2010
Offline
149
#6
WebAlt:
User-agent: *
Disallow: /web/
Disallow: /search/

Делал так все равно сканирует эти страницы проверяю в панели просмотреть как Гуглбот и он их сканирует эти папки

[Удален]
#7

А компонент правильно настроен?

Какие ссылки стоят в теге base?

Есть ли canonical на странице?

Какая версия Joomla?

Вы дайте больше сведений, а лучше ссылку на сайт, чтоб в живую посмотреть ваши ссылки кривые.

siv1987
На сайте с 02.04.2009
Offline
427
#8
megallodon:
Делал так все равно сканирует эти страницы проверяю в панели просмотреть как Гуглбот и он их сканирует эти папки

Проверять нужно в анализаторе robots, и смотреть в список в исключеных страницах.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий