Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Роботс для DLE

12
marinero
На сайте с 20.05.2012
Offline
42
marinero
961

Скажите,такой файл роботс правильный или нет.Сайт никуда не добавлял,на гугля его сам нашел и индексирует полным ходом,даже то,что запрещено.Вот сам файл:

User-agent: *

Allow: /uploads/posts/

Disallow: /engine/go.php

Disallow: /favorites/

Disallow: /cache/

Disallow: /cgi-bin/

Disallow: /page/

Disallow: */page/*

Disallow: /engine/

Disallow: /language/

Disallow: /templates/

Disallow: /uploads/

Disallow: /backup/

Disallow: /newposts/

Disallow: /lastnews/

Disallow: /catalog/

Disallow: /tags/

Disallow: /autobackup.php

Disallow: /admin.php

Disallow: /statistics.html

Disallow: /banners/

Disallow: /user/

Disallow: /*action=mobile$

Disallow: /do=*

Disallow: /*do=*

Disallow: /?*

Sitemap: http://домен.ru/sitemap.xml

Host: http://домен.ru/

Монетизация сайтов с фильмами.Деньги для киносайтов (http://websharks.ru/ref/5220/). Рефералам помогаю с установкой.
WebAlt
На сайте с 02.12.2007
Offline
266
WebAlt
#1

В main.tpl шаблона после: 

<head>

{headers}

Вставить: 

[aviable=main|cat|showfull|static]<meta name="robots" content="index, follow" />[/aviable]

[not-aviable=main|cat|showfull|static]<meta name="robots" content="noindex, nofollow" />[/not-aviable]

robots.txt 

User-agent: *

Disallow: /cgi-bin/ # - эта папка мне понятна.

Disallow: /engine/go.php

Disallow: /engine/download.php

Disallow: /banners/ # - этой папки в DLE нет, если нужно закрыть, закройте.

Disallow: /cache/ # - этой папки в DLE нет, если нужно закрыть, закройте.

Host: example.com  # - можно не указывать, указывается в панелях вебмастера Yandex и Google.

Sitemap: http://example.com/sitemap.xml  # - можно не указывать, указывается в панелях вебмастера Yandex и Google.

autobackup.php и admin.php - переименовать сразу.

PROFIT! ;)

PS:

Если нужно и page закрыть, то тогда так: 

[aviable=showfull|static]<meta name="robots" content="index, follow" />[/aviable]

[not-aviable=main|cat|showfull|static]<meta name="robots" content="noindex, nofollow" />[/not-aviable]

В robots.txt добавить Disallow: /page/

PS2: строку [aviable] [/aviable] можно вообще убрать.;)

marinero
На сайте с 20.05.2012
Offline
42
marinero
#2

admin.php нашел,он в корне,а где autobackup.php?

WebAlt
На сайте с 02.12.2007
Offline
266
WebAlt
#3

Там же должен быть.

marinero
На сайте с 20.05.2012
Offline
42
marinero
#4

Нету его там

iren K
На сайте с 28.12.2008
Offline
222
iren K
#5
marinero:
Нету его там

ну что тут сказать.. тогда моня поздравить..😒

c уважением Iren
marinero
На сайте с 20.05.2012
Offline
42
marinero
#6
ну что тут сказать.. тогда моня поздравить

Это очень плохо?

iren K
На сайте с 28.12.2008
Offline
222
iren K
#7
marinero:
Это очень плохо?

это как в анекдоте:

доктор: у Вас рачок

пациент: доктор,я умру?

доктор: а как же..

WebAlt
На сайте с 02.12.2007
Offline
266
WebAlt
#8
marinero:
Это очень плохо?

Ну народ, ТС, не судьба из чистого дистрибутива взять?:)

marinero
На сайте с 20.05.2012
Offline
42
marinero
#9
это как в анекдоте

Скажите конкретно,сайту хана будет?

iren K
На сайте с 28.12.2008
Offline
222
iren K
#10
marinero:
Скажите конкретно,сайту хана будет?

да нет => тут чел Вам отписал

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий