robots.txt для WP

184

imisterio

2 апреля 2010, 18:14

558

Вопрос такой: что нужно прописать в файле robots.txt чтобы яндекс не индексировал дублированный контент? Движок WordPress. Ну или предложите другие пути решения проблемы дублированного контента.

D

107

DC***

2 апреля 2010, 18:18

#1

imisterio:
Вопрос такой: что нужно прописать в файле robots.txt чтобы яндекс не индексировал дублированный контент? Движок WordPress. Ну или предложите другие пути решения проблемы дублированного контента.

Что-то вроде:

User-agent: *

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content

Disallow: /trackback

Disallow: /feed

Disallow: /comments

Disallow: */trackback

Disallow: */feed

Disallow: */comments

Disallow: /*?*

Disallow: /*?

Allow: /wp-content/uploads

505

6666

2 апреля 2010, 18:38

#2

Плюс один к вопросу, если кто кинет ссылку на готовый образец, то будет хорошо.

Каждое мое сообщение проверила и одобрила Елена Летучая. (c) Для меня очень важно все что Вы говорите! (http://surrealism.ru/123.mp3) .

66

Prodv1gator

19 апреля 2021, 13:49

#3

апну тему

поделитесь хорошим роботс для WP

1609

SeVlad

19 апреля 2021, 15:04

#4

Prodv1gator #:
поделитесь хорошим роботс для WP

роботс нужен для сайта, а не для движка.

https://searchengines.guru/ru/forum/974085

1

Все вопросы по robots.txt - 2 - Вопросы новичков в SEO - Практические вопросы оптимизации - Форум об интернет-маркетинге

2021.04.19
searchengines.guru

Конеш я не спорю, что нужно читать рекомендации яндекса и гугла, что нужно читать и разбираться...

Делаю хорошие сайты хорошим людям. Предпочтение коммерческим направлениям. Связь со мной через http://wp.me/P3YHjQ-3.

B

128

Biomusor

19 апреля 2021, 16:53

#5

DC*** #:

Что-то вроде:

Если закрывать контент, то и открыть нужно нужные папки, а не только upload

Зачем быть уникальным в мире, где все можно скопировать

VK приобрела 70% в структуре компании-разработчика red_mad_robot