Форум Практика оптимизации Любые вопросы от новичков по оптимизации

robots.txt - првильно ли прописан?

emtecif
На сайте с 05.03.2012
Offline
150
emtecif
367

User-agent: *

Disallow: /engine/go.php

Disallow: /engine/download.php

Disallow: /user/

Disallow: /tags/

Disallow: /engine/

Disallow: /language/

Disallow: /uploads/files/

Disallow: /favorites/

Disallow: /upgrade/

Disallow: /newposts/

Disallow: /index.php?do=lostpassword

Disallow: /index.php?do=feedback

Disallow: /statistics.html

Disallow: /*subaction=userinfo

Disallow: /*subaction=newposts

Disallow: /*do=lastcomments

Disallow: /*do=feedback

Disallow: /*do=register

Disallow: /*do=lostpassword

Disallow: /*do=addnews

Disallow: /*do=stats

Disallow: /*do=pm

Disallow: /addnews.html

Sitemap: http://site.ru/sitemap.xml

Host: site.ru

september
На сайте с 11.09.2009
Offline
591
september
#1

Только непонятно зачем нужна дырка между:

Disallow: /engine/

Disallow: /language/
$ карта для вывода вебмани в любой точке мира (https://www.epayments.com/registration?p=dc2462e885)
iren K
На сайте с 28.12.2008
Offline
222
iren K
#2
september:
Только непонятно зачем нужна дырка между:

+ лишнее: Вы трижды прописали

Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /engine/

достаточно один раз


Disallow: /engine/

тоже лишнее

Disallow: /uploads/files/

просто

Disallow: /uploads/

зы. вообще есть сервис проверки на валидность роботса

c уважением Iren

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий