Правильность robotx.txt

41

F1eryG

29 июня 2005, 15:01

518

У меня на сайте есть возможность распечатать новость, это конечно хорошо, но мне нужно, чтобы поисковики эти страницы не индексировали, замутил robots.txt, но мне кажется, что всё равно ссылки индексируются.

нужно запретить к индексации страницы

www.news-24.ru/news/print-***.html

вот содержание robots.txt

User-agent: *

Disallow: /print

Host: www.news-24.ru

User-agent: Googlebot

Disallow: /print

33

gilza

29 июня 2005, 15:06

#1

Я бы так написала...

И к ссылке на печатную версию прилепила бы nofollow

User-agent: *

Disallow: /news/print

Host: www.news-24.ru

User-agent: Googlebot

Disallow: /news/print

141

wayfarer

29 июня 2005, 15:07

#2

Disallow: /news/print

так нужно

одновременно написали

Предпочитаю наличку

FG

41

F1eryG

29 июня 2005, 15:09

#3

простите, а что за nofollow? и если я пропишу так /news/print то нет ли вероятности того, что и новости не будут индексироваться, ссылки на них у меня имеют такой вид www.news-24.ru/news/a-***.html

33

gilza

29 июня 2005, 15:13

#4

F1eryG:
нет ли вероятности того, что и новости не будут индексироваться,

есть вероятность...равна нулю

33

gilza

29 июня 2005, 15:20

#5

Вы также можете использовать тэг

Он означает, что робот поисковой машины не должен идти по ссылкам с данной страницы.

FG

41

F1eryG

29 июня 2005, 15:42

#6

ясно, спасибо.

33

gilza

29 июня 2005, 15:57

#7

gilza:
И к ссылке на печатную версию прилепила бы nofollow

вот есть атрибут ссылки rel=nofollow

при нем ссылка не влияет на PR

но вот идет ли по ней поисковый паук, не знаю

Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта

Open AI тестирует память для ChatGPT