Форум Сайтостроение Веб-строительство

Дайте пожалуйста правильный Robots.txt для WP

[Удален]
583

Ежедневно в выдаче появляется вот такая вот хрень, как на скрине.

Это feed-ы

Как избавиться от них? Сейчас в роботс прописано следующее:

Disallow: */*/feed/*/

Disallow: */feed

Но, как видите, не помогает.

Что делать-то?

jpg 127439.jpg
SeVlad
На сайте с 03.11.2008
Offline
1609
SeVlad
#1
Shant-kov:
Что делать-то?

Показать сайт.

В личку - не надо.

Делаю хорошие сайты хорошим людям. Предпочтение коммерческим направлениям. Связь со мной через http://wp.me/P3YHjQ-3.
IL
На сайте с 20.04.2007
Offline
435
ivan-lev
#2
Shant-kov:
Что делать-то?

Перейти по ссылке "Подробнее…", ознакомиться с информацией и выполнить инструкции.

... :) Облачные серверы от RegRu - промокод 3F85-3D10-806D-7224 ( http://levik.info/regru )
M6
На сайте с 20.05.2010
Offline
25
m76
#3

По user-agent определять поисковых ботов и отдавать им 404 :)

G-and-Y
На сайте с 29.06.2013
Offline
156
G-and-Y
#4

alaev.info/blog/post/4143

Абузо-устойчивые впс в Нидерландах от 5$/мес (https://cp.inferno.name/aff.php?aff=2991)
SeVlad
На сайте с 03.11.2008
Offline
1609
SeVlad
#5
G-and-Y:
alaev.info/blog/post/4143

В который раз убеждаюсь, что некоторые не читают дальше названий поста и постят всякую фигню. Что на форум что в свои ГСы.

Disallow: /wp-
G-and-Y
На сайте с 29.06.2013
Offline
156
G-and-Y
#6
SeVlad:
В который раз убеждаюсь, что некоторые не читают дальше названий поста и постят всякую фигню. Что на форум что в свои ГСы.

Толи я тупой что я не так запостил? а ну растолкуй мего гуру!

[Удален]
#7
G-and-Y:
Толи я тупой что я не так запостил? а ну растолкуй мего гуру!

Не гуру он! Мне в ЛС привели пару цитат из его сообщений в личной переписке. Смех да и только:)

Он элементарного не знает

Marti7856
На сайте с 16.02.2010
Offline
134
Marti7856
#8
G-and-Y:
alaev.info/blog/post/4143

Это полный бред!

Вот примерно так:

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: /feed/
Disallow: /category/
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /?s=
Host: www..****.ru

Sitemap: http://www.****.ru/sitemap.xml.gz
Sitemap: http://www.****.ru/sitemap.xml
Если вы путешествуете, возможно Вас заинтересует гид (https://dreamguide.world/countries/) на русском языке!
SeVlad
На сайте с 03.11.2008
Offline
1609
SeVlad
#9
G-and-Y:
Толи я тупой что я не так запостил?

Наводящие вопросы.

1. Какая проблема у ТС? (а ты на что отвечал?)

2. Что не понятно из приведённой мной цитаты из того ГСа?

А то, что это ГС, наполненный всяким бредом все уже как минимум один раз видели. Эта ссылка только закрепляет эту мысль.

Про то, что не может быть универсального правильного роботса даже говорить не буду.

Выводы делай сам.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий