robots.txt ухудшил трафик

1 234
webrock
На сайте с 05.04.2010
Offline
261
#31
tanya2307:
Да решила по-быстрому сляпать :( левой ногой, пока остальные конечности и голова ребенком занимаются

тогда по-быстрому закиньте такой robots.txt и продолжайте заниматься и ребёнком и сайтом:

User-agent: *


Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments

Sitemap: http://lubimyjdom.ru/sitemap.xml
Полный аудит сайтов. (/ru/forum/765361)
Devvver
На сайте с 02.07.2008
Offline
663
#32
tanya2307:
А что бы Вы посоветовали сделать?

поставить нормальный роботс.

Проседание трафа - возможно. Зато гарантии от проблем с дублями в будущем.

Мой блог. Все о создании сайтов,Seo и СДЛ ( https://devvver.ru/ ) Мой SEO телеграм канал https://t.me/seobloggers
T2
На сайте с 16.02.2013
Offline
7
#33

webrock, Devvver, спасибо. Попробую хоть немного разобраться.

T
На сайте с 02.10.2012
Offline
44
#34
tanya2307:
Так выяснили же уже, что причем. Почитайте комменты выше.

Я и говорю сделайте аудит сайту, сервисов достаточно много, которые могут выполнить все настроить и отписать где и в чем проблема.

T2
На сайте с 16.02.2013
Offline
7
#35

Загрузила вот такой. Если кому не лень из знатоков, гляньте хоть одним глазом, пожалуйста.

User-agent: *

Disallow: /cgi-bin

Disallow: /wp-admin/

Disallow: /wp-includes/

Disallow: /wp-content/plugins/

Disallow: /wp-content/cache/

Disallow: /wp-content/themes/

Disallow: /wp-trackback

Disallow: /wp-feed

Disallow: /wp-comments

Disallow: /?cat

Disallow: /?author

Disallow: /?tag

Disallow: /?paged

Disallow: */feed

Disallow: */trackback

Disallow: */comments

User-agent: Mediapartners-Google

Disallow:

User-agent: Yandex

Disallow: /cgi-bin

Disallow: /wp-admin/

Disallow: /wp-includes/

Disallow: /wp-content/plugins/

Disallow: /wp-content/cache/

Disallow: /wp-content/themes/

Disallow: /wp-trackback

Disallow: /wp-feed

Disallow: /wp-comments

Disallow: /?cat

Disallow: /?author

Disallow: /?tag

Disallow: /?paged

Disallow: */feed

Disallow: */trackback

Disallow: */comments

Host: lubimyjdom.ru

Sitemap: http://lubimyjdom.ru/sitemap.xml

viКing
На сайте с 20.03.2008
Offline
124
#36

Этого будет вполне достаточно


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /?cat
Disallow: /?author
Disallow: /?tag
Disallow: /?paged
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Host: lubimyjdom.ru
Sitemap: http://lubimyjdom.ru/sitemap.xml

User-agent: Mediapartners-Google
Disallow:

я правда еще и категории не закрываю, у меня на одно сайте на них куча трафика идет

T2
На сайте с 16.02.2013
Offline
7
#37
viКing:
Этого будет вполне достаточно

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /?cat
Disallow: /?author
Disallow: /?tag
Disallow: /?paged
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Host: lubimyjdom.ru
Sitemap: http://lubimyjdom.ru/sitemap.xml

User-agent: Mediapartners-Google
Disallow:


я правда еще и категории не закрываю, у меня на одно сайте на них куча трафика идет

То есть для Яндекса отдельно не обязательно писать?

У меня вроде тоже часть трафика на категории шло. А если их не закрыть, за дубли не забанят?

viКing
На сайте с 20.03.2008
Offline
124
#38
tanya2307:
То есть для Яндекса отдельно не обязательно писать?

не обязательно, отдельно для Яндекса пишут из-за строки Host, но я не вижу в этом смысла, так как остальные поисковики просто её проигнорируют.

tanya2307:
У меня вроде тоже часть трафика на категории шло. А если их не закрыть, за дубли не забанят?

а категории - это дубли каких страниц?

T2
На сайте с 16.02.2013
Offline
7
#39
viКing:
а категории - это дубли каких страниц?

ну там первые части статей дублируются

1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий