вопрос по robots.txt на Wordpress

Peck
На сайте с 10.04.2012
Offline
52
667

1. планирую продвигать главную страницу и страницы категорий сайта. как правильно избавиться от дубля? ведь если закрыть от индексации категории (Disallow: /category/), то продвигать страницы категорий не стоит, или я не прав? :) просто вид и текст материалов одинаковый, как на главной, так и в категориях.

2. теги. я читал, что если сайт свежий, то желательно их прикрыть от индекса (Disallow: /tag/). правда ли это?

в общем, используется главная, категории и теги сайта. что закрывать от индекса а что нет?

Идеальная тизерка до 2 руб. за клик (http://u.to/SUIYAg). Минималка 15 рублей. Выплаты в WMR раз в неделю. Лучшая товарная тизерка от 3-х центов за клик (http://u.to/bIMYAg). Минималка 20 долларов. Выплаты в WMZ два раза в месяц.
RaftKorn
На сайте с 20.03.2007
Offline
166
#1

Поставьте all-in-one-seo-pack - через него сможете позакрывать теги/архивы/категории без роботса.

Премиум верстка и дизайн под ключ ( https://searchengines.guru/ru/forum/1045270 )
AutoBlogger
На сайте с 05.10.2011
Offline
115
#2

all-in-one-seo-pack тормозит работу блога, т.к. изменяет контент страниц "налету", а это не есть хорошо. Использование robots.txt для закрытия от индексации частей сайта, является более правильным.

Что касается вопроса закрывать ли категории/тэги или нет. Лично я не вижу в этом особого смысла. Гугль с Яндексом знают, что такое WordPress и они прекрасно понимают, что это не дубли.

🪄 www.cyberseo.net - плагин для создания автоблогов под WordPress, с поддержкой искусственного интеллекта OpenAI GPT-4, Anthropic Claude, Google Gemini Pro, DALL·E 3 и Stable Diffusion XL | 📣 Импорт RSS / XML / JSON/ CSV / HTML в WooCommerce: https://bit.ly/3EyYQp4
Peck
На сайте с 10.04.2012
Offline
52
#3

RaftKorn, этот плагин стоит, но вопрос совсем другой...

Peck
На сайте с 10.04.2012
Offline
52
#4
AutoBlogger:
Гугль с Яндексом знают, что такое WordPress и они прекрасно понимают, что это не дубли.

а текст одинаковый на всех 3-х страницах, это тоже не дубль?

AutoBlogger
На сайте с 05.10.2011
Offline
115
#5
Peck:
а текст одинаковый на всех 3-х страницах, это тоже не дубль?

На страницах - дубль. А если в индексе, на странице, в архивах, тэгах и категориях, то уже нет. Я же говорю, Гугль прекрасно знает структуру сайтов на WordPress. Вот robots.txt с блога Мэтта Каца: http://www.mattcutts.com/robots.txt - как видите, он ничего не закрывает кроме /blog/wp-content.

Peck
На сайте с 10.04.2012
Offline
52
#6
AutoBlogger:
На страницах - дубль. А если в индексе, на странице, в архивах, тэгах и категориях, то уже нет.

очень хотелось бы этому верить. :)

AutoBlogger:
Гугль прекрасно знает структуру сайтов на WordPress

только Гугль?

Z
На сайте с 13.12.2009
Offline
452
#7
Peck:
просто вид и текст материалов одинаковый, как на главной, так и в категориях.

а в чем проблема сделать на главной статичную страницу, чтоб с категориями по тексту не пересекалась? Да и на категории тексты добавить отдельно?

Консультации, seo-аудиты - https://seo-consulting.su Профессионально и без воды
Peck
На сайте с 10.04.2012
Offline
52
#8
zusull:
на главной статичную страницу

а что мне тогда вывести на главной? и тем более на главной записи будут быстрее индексироваться, или не так?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий