Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Закрывать wp-content/uploads/ от индексации?

Dex2001
На сайте с 15.03.2012
Offline
104
Dex2001
2171

У меня в этой папке, помимо картинок, куча документов (doc, pdf), которые я добавляю для пользователей на страницы сайта. Сразу не доглядел, а сегодня увидел что все они в индексе, естественно что кликая на них из поиска, пользователь их сразу скачивает, не заходя на сайт.

Как правильно закрыть?

Disallow: /wp-content/uploads/

или

Disallow: */uploads/

Пока сделал так

User-agent: Yandex

Disallow: /wp-content/uploads/

User-agent: Googlebot

Disallow: /wp-content/uploads/

User-agent: Googlebot-Image

Allow: /wp-content/uploads/

User-agent: YandexImages

Allow: /wp-content/uploads/

Кто что думает?

Я не старею, я приближаюсь к стилю ретро)
widg
На сайте с 01.01.2017
Offline
30
widg
#1

Disallow: /wp-content/uploads/*/*.doc

Disallow: /wp-content/uploads/*/*.pdf

прострация
M
На сайте с 04.12.2013
Offline
223
miketomlin
#2

Доки обычно закрываю. Картинки – в зависимости от тематики/типа сайта, но часто тоже закрываю.

Первый вариант закрытия более простой. Закрытие только доков показали выше. Можно ограничиться закрытием только по расширению. Мне в этом плане проще, т.к. у меня для картинок и прочего используются две разные ветки (/images/ и /files/), т.е. чтобы закрыть только доки, достаточно написать «Disallow: /files/», но не указывать аналогичную директиву для закрытия ветки с картинками.

Домены и скрипт для коротких ссылок: https://u75.ru/domains-for-shortcuts
Все вопросы по robots.txt Индексация картинок и текстов Как закрыть GET-параметр?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий