Вопрос по robots.txt

HR
На сайте с 22.08.2010
Offline
94
437

Здравствуйте! Подскажите пожалуйста

В robots.txt я запретил вот такой адрес

Disallow: /page/1

Но вместе с этим запретились и страницы

Disallow: /page/10

Disallow: /page/11

Disallow: /page/12

и т.д.

Как запретить именно только адрес http://domen.ru/page/1 Так какк это у меня дубль главной страницы получается...

S6
На сайте с 06.12.2011
Offline
158
SEO
#1

Disallow: /page/1$

Аудит сайта. Консультации.
seolucky1
На сайте с 05.12.2012
Offline
51
#2

Вот у меня тоже по теме сайт remontic.com, в файле robots.txt прописан Host: remontic.com, а в выдаче результаты с www и без, страницы появились в похожих результатах, В ПС прописывала главный без www. Помогите разобраться.

A
На сайте с 04.02.2013
Offline
32
#3

Оба варианта сайта в выдаче гугла? Директива host - только для Яндекса.

Zegeberg
На сайте с 30.09.2010
Offline
282
#4
seolucky1:
Вот у меня тоже по теме сайт remontic.com, в файле robots.txt прописан Host: remontic.com, а в выдаче результаты с www и без, страницы появились в похожих результатах, В ПС прописывала главный без www. Помогите разобраться.

В htaccess пропишите склейку и делов.

Ссылки с форумов, блогов и соц сетей ( https://forumok.com/p/c1710b6b/ ) Антибот ( https://antibot.cloud/?ref=15262 )
seolucky1
На сайте с 05.12.2012
Offline
51
#5

А где можно посмотреть образец, это первый сайт мой. С robots.txt как то понятней было

E
На сайте с 21.09.2009
Offline
283
#6

seolucky1, в разделе тема ФАК закреплена для таких вопросов

/ru/forum/comment/1598421

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий