Форум Практика оптимизации Любые вопросы от новичков по оптимизации

индексируется сайт как с www., так и без www,

[Удален]
672

Доброго времени мой сайт мой сайт индексируется и www и без них , скажите , как указать главное зеркало в файле robot.txt . Что будет потом яндекс исключит дубликаты? и мне непонятно про редирект 301

Ткните пожалуйста куда копать

мой robot.txt такой

User-agent: *

Allow: /

Host: www.plasterstudio.ru

Sitemap: http://plasterstudio.ru/sitemap.xml

Sitemap: http://plasterstudio.ru/sitemap.xml.gz

Talisman13
На сайте с 20.01.2007
Offline
211
Talisman13
#1

errrrol, прочти и думаю все вопросы отпадут.

Я бы все таки еще изменил бы

errrrol:
Allow: /
на Disallow: Так как думаю не все же поисковики понимают эту директиву.
[Удален]
#2

Спасибо всё стало гораздо яснее

M1
На сайте с 13.02.2007
Offline
165
User
#3
errrrol:
мой robot.txt такой

Это очень мило, но файл должен называться robots.txt.

[Удален]
#4
Mr 13:
Это очень мило, но файл должен называться robots.txt.

Прочитал как-будто идешь на работу и вспоминаешь, что портфель забыл и такккк тебя пронзает, а потом через долю секунды понимаешь, что ещё вчера его на работе оставил и всё в порядке) Я ошибся, только на форуме в написание файла robots.txt в корне сайта всё как надо. Спасибо

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий