Робот постоянно отыскивает какие-то страницы !?

[Удален]
750

Доброй ночи всем! У меня возник казус с сайтом на Joomla, поисковой робот постоянно отыскивает какие-то страницы на моем сайте !! Которых в природе нет! Всего на сайте 22 страницы из них 10 где-то это статьи. А вебмастер как гоши так и яши показывает по 70-90 страниц? В чем может быть дело?

т.к. больше всего меня смущают плохие страницы или это нормальное явление когда роботы находят больше страниц чем есть на самом деле ?вот сам веб сайт

N
На сайте с 14.12.2010
Offline
7
#1

Cкорей всего робот отсканировал и пичатные страницы, страницы пользователей, и другие функции скрипта

Ingvarr
На сайте с 26.04.2009
Offline
452
#2

служебные страницы тоже проиндексировал

[Удален]
#3

закройте все служебные разделы сайта в robots.txt

L
На сайте с 07.12.2007
Offline
351
#4
rz00007:
больше всего меня смущают плохие страницы или это нормальное явление когда роботы находят больше страниц чем есть на самом деле ?

Скачайте робота-паучка Xenu - он покажет Вам структуру страниц сайта глазами ПС - картинки, все страницы которые есть, в том числе и битые.

Сильно удивитесь, что там у Вас есть на сайте.

[Удален]
#5
sloving:
robots.txt вам в помощь.

Служебные папки у меня все закрыты вот сам файт:

User-agent: *

Sitemap: http://presite.ru/index.php?option=com_xmap&sitemap=1&view=xml

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /component/

Disallow: /images/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

rz00007 добавил 23.12.2010 в 13:28

Nesterboy:
Cкорей всего робот отсканировал и пичатные страницы, страницы пользователей, и другие функции скрипта

Печатных страниц нет, я их в самом начале отключил !

[Удален]
#6

а какие примерно адреса левых страниц выдает?

[Удален]
#7
badtier:
а какие примерно адреса левых страниц выдает?

у меня стоит sh404SEF

aicontactsafe.html

glavnaya/

internet-magazin2.html - здесь 404 выдает

+ ещё несколько дублей контактов типа:

kontaktyi.html (index.php?option=com_aicontactsafe&Itemid=13&lang=ru&layout=message&view=message)

kontaktyi.html (index.php?option=com_aicontactsafe&Itemid=14&lang=ru&layout=message&view=message)

вот особенно последние два интересны! как такое возникло и как от них избавится ?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий