И снова Robots.txt

konchik
На сайте с 08.11.2010
Offline
94
562

Здравствуйте всем, проблема с сайтом, движок dle, в индексе яндекса 500 страниц, а в google аж 6000, сайту 8 месяцев, 2 месяца назад написал такой вот Robots.txt

User-agent: *

Disallow: /*print

Disallow: /user/

Disallow: /backup/

Disallow: /engine/

Disallow: /language/

Disallow: /templates/

Disallow: /upgrade/

Disallow: /uploads/

Disallow: /autobackup.php

Disallow: /admin.php

Disallow: /index.php?do=addnews

Disallow: /index.php?do=feedback

Disallow: /index.php?do=lostpassword

Disallow: /index.php?do=pm

Disallow: /index.php?do=register

Disallow: /index.php?do=stats

Disallow: /index.php?do=search

Disallow: /index.php?subaction=newposts

Disallow: /?do=lastcomments

Disallow: /statistics.html

Sitemap: http://сайт.ru/sitemap.xml

Подскажите пожалуйста что нужно еще добавить?

ParserYa
На сайте с 04.10.2010
Offline
29
#1

Нормальный robots.txt... причина плохой индексации явно не в нем... смотрите в панели Яндекс Вебмастера, что там пишут вообще?

konchik
На сайте с 08.11.2010
Offline
94
#2
ParserYa:
Нормальный robots.txt... причина плохой индексации явно не в нем... смотрите в панели Яндекс Вебмастера, что там пишут вообще?

Да там все в норме, у меня реально на сайте 500 страниц, а вот google 6000 нашел, да раньше до роботса у яндекса тоже было около 2000 тыс, но сейчас по яндексу все в норме.

Может еще host прописать, только я не знаю как.

W
На сайте с 09.04.2010
Offline
24
#3

Disallow: /index.php?do=addnews это вы что запретили??

host: site.ru внимание на www или без

где-то прочитал что яндексу нравиться собсвтенный робот.тхт

User-agent: yandex

....

...

...

и и всё что у вас там написано

Если не прав поправьте, мне будет уроком

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий