Форум Практика оптимизации Любые вопросы от новичков по оптимизации

роботс.txt

boikoch
На сайте с 31.07.2011
Offline
41
boikoch
411

уважаемые форумчане подскажите какой роботс лучше всего использовать для Word Press

подойдет ли такой или что то исправить?

User-agent: Yandex

Disallow: /wp-includes/

Disallow: /wp-admin/

Disallow: /images/

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: /xmlrpc.php

Disallow: /&hellip/

Disallow: /*?utm_source*

Disallow: /*?utm_content*

Disallow: /*?fuck*

Disallow: /*?base*

Disallow: /*?do*

Disallow: /&text*/

Disallow: /*?s*

Disallow: /*?dko*

Disallow: /*&preview*

Disallow: /*feed*

Disallow: /*url.php*

Disallow: /*?replytocom*

Host: сайт.ru

series60
На сайте с 03.02.2009
Offline
92
series60
#1

Пробовали?

boikoch
На сайте с 31.07.2011
Offline
41
boikoch
#2

не поверите) канеш пробовал, только оптимального чет так и не нашел

kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#3
boikoch:
не поверите) канеш пробовал, только оптимального чет так и не нашел

Чего оптимального? Под вордпресс можно сделать 100500 роботсов и все будут оптимальные для каждого отдельного случая. Принцип прост: закрываем лишние урл, пишем хост и сайтмап. Какие у тебя лишние даже Кашпировский не знает. Чего хотел? Вторую половину твоих правил где накопал?

Круглый SEO стол «Покупка RIW 2010: «Автоматизация анализа Яндекс Маркет создал карту
boikoch
На сайте с 31.07.2011
Offline
41
boikoch
#4

а что не так то?

series60
На сайте с 03.02.2009
Offline
92
series60
#5

Допустим:

Disallow: /*?fuck*

Это зачем?

Покажите сайт.

По каким критериям вы определяется "Оптимальность роботс.тхт"?

series60
На сайте с 03.02.2009
Offline
92
series60
#6

Посмотрев сайт, и предложенный вами роботс.тхт, отпало желание вам помогать.

Вы хоть чуть-чуть пошевелите мозгом.

Сравните с моим:

User-agent: *

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: /xmlrpc.php

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /wp-trackback

Disallow: /wp-feed

Disallow: /wp-comments

Disallow: */trackback

Disallow: */feed

Disallow: */comments

Disallow: /archive

Disallow: */trackback/

Disallow: */feed/

Disallow: */comments/

Disallow: /?feed=

Disallow: /?s=

Host: сайт.ru

О чем нужно помнить Как использовать электронную почту 9 советов по оптимизации
I
На сайте с 30.10.2011
Offline
15
instigatorseo
#7

Глянь вот тут:

http://maulnet.ru/robots.txt

http://shakin.ru/robots.txt

http://dimox.name/robots.txt

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий