Все вопросы по robots.txt - 2

XPraptor
На сайте с 15.10.2004
Offline
333
#331

goldyd, да, именно так.

River
На сайте с 25.02.2011
Offline
135
#332

Подскажите, крайняя снизу строчка - прописана правильно? Сайт проиндексирован.

jpg robots_elektro.jpg
Записки дегустатора напитков (http://www.beerblogger.ru) +18 Bq-Recovery манипуляция ценами ( /ru/forum/1017253)
WR
На сайте с 27.04.2016
Offline
56
#333

Allow: /*?$

Disallow: /*?

сайты на OVH
River
На сайте с 25.02.2011
Offline
135
#334

WCREATOR, если ответ для меня - прошу комментарии текстом.

Борис С
На сайте с 21.11.2008
Offline
109
#335

А как можно запретить для индексации в Гугл - файлы pdf doc - там инструкции, служебные неуникальные документы, законы, бланки и т.п.

То есть такого у меня набирается около 500 неуникальных документов по сайту на них идут ссылки с материалов ( как раз типа доказательства качества контента )

директива robots.txt сейчас прописана так

Disallow: /*.pdf

Disallow: /*.doc

Disallow: /*.rtf

В консоли пишет , проиндексировано не смотря на запрет в robots.txt

Как запретить их индексацию и сделать так, чтобы они не индексировались в Гугле?

V9
На сайте с 21.10.2017
Offline
43
#336

Ребят подскажите что делать?

http://prntscr.com/qcsqhe

сайт по которому задаю вопросы 3dplan.info
[Удален]
#337

Там для альтернативно одаренных написано, что делать. И роботс ни при чем.

Ivan Glukhov
На сайте с 05.11.2019
Offline
54
#338
Ivan Glukhov:
Подскажите, что прописать для закрытия от индексации страниц, CMS Wordpress.

А то генерирует отдельный URL для каждого изображения.

разобрался, скачал плагин для редиректа с таких URL

Пишу о Яндекс.Директе - ( https://xn----8sbbfdb7cdxe8cya.xn--p1ai/ )
G
На сайте с 21.10.2015
Offline
34
#339

Здравствуйте, подскажите, как закрыть от индексации ссылки типа-

domen.com/2365-kak-prigotovit-beylis-recept-s-foto

переменных в сслыке : /*****-kak-prigotovit-*****-recept-s-foto

то есть слова -kak-prigotovit- нужно в роботс както закрыть чтобы эти ссылки отпали.

Подскажите, пожалуйста.

[Удален]
#340

Значок *

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий