robots.txt для WP

imisterio
На сайте с 06.09.2009
Offline
173
516

Вопрос такой: что нужно прописать в файле robots.txt чтобы яндекс не индексировал дублированный контент? Движок WordPress. Ну или предложите другие пути решения проблемы дублированного контента.

D
На сайте с 30.09.2008
Offline
107
#1
imisterio:
Вопрос такой: что нужно прописать в файле robots.txt чтобы яндекс не индексировал дублированный контент? Движок WordPress. Ну или предложите другие пути решения проблемы дублированного контента.

Что-то вроде:

User-agent: *

Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads
6666
На сайте с 10.01.2005
Offline
505
#2

Плюс один к вопросу, если кто кинет ссылку на готовый образец, то будет хорошо.

Каждое мое сообщение проверила и одобрила Елена Летучая. (c) Для меня очень важно все что Вы говорите! (http://surrealism.ru/123.mp3) .
Prodv1gator
На сайте с 30.06.2017
Offline
34
#3
апну тему

поделитесь хорошим роботс для WP

SeVlad
На сайте с 03.11.2008
Offline
1462
#4
Prodv1gator #:
поделитесь хорошим роботс для WP

роботс нужен для сайта, а не для движка.

https://searchengines.guru/ru/forum/974085

Все вопросы по robots.txt - 2 - Вопросы новичков в SEO - Практические вопросы оптимизации - Форум об интернет-маркетинге
Все вопросы по robots.txt - 2 - Вопросы новичков в SEO - Практические вопросы оптимизации - Форум об интернет-маркетинге
  • 2021.04.19
  • searchengines.guru
Конеш я не спорю, что нужно читать рекомендации яндекса и гугла, что нужно читать и разбираться...
Делаю хорошие сайты хорошим людям. Предпочтение коммерческим направлениям. Топики помощи с ⓌordPress (https://searchengines.guru/ru/forum/1032910 ) и основы безопасности сайтов ( https://searchengines.guru/ru/forum/774117 ). *** Помощь\консультации в топиках форума - БЕСПЛАТНО. Платные услуги ( https://wp.me/P3YHjQ-3 ) - с бюджетом от 150$ ***
B
На сайте с 27.05.2018
Offline
52
#5
DC*** #:

Что-то вроде:

Если закрывать контент, то и открыть нужно нужные папки, а не только upload

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий