Robots.txt

12
VoV@
На сайте с 22.09.2007
Offline
196
#11
Rxp:
А если я просто хочу прописать хост для всех поисковиков, как правильно сделать?

Директива host Является корректной только для робота Яндекса

⭐ Разработка Андроид-приложений (Xamarin C#). ⭐ Разработка ASP.NET (WebForms, MVC, WebAPI, Core). ⭐ Цой жив!
R
На сайте с 24.01.2008
Offline
180
#12
VoV@:
Директива host Является корректной только для робота Яндекса

Т.е. гугл директиву Host: www.mysite.ru не воспринимает?

Удаление вирусов с сайта, защита сайта, Гарантия! ( /ru/forum/999073 ) -> топик на маулталк ( http://www.maultalk.com/topic113834s0.html ) -> Топик в сапе ( http://forum.sape.ru/showthread.php?t=79363 ). TELEGRAM - https://t.me/Doktorsaitov
Delarante
На сайте с 13.07.2008
Offline
69
#13
Rxp:
Т.е. гугл директиву Host: www.mysite.ru не воспринимает?

Нет! Это только для яндекса...

angr:
VoV@, от перемены мест...
но пустую строку все-таки не стоит оставлять...

angr я тут порылся в Яндекс факе, они правда рекомендуют ставить пустую строку. Хотя я не знаю как другие поисковики к этому отнесутся...

http://help.yandex.ru/webmaster/?id=996567#996573

Анализатор Яши не ругается и на запись без пустой строки. Я всегда указываю без и проблем небыло...

Дмитрий Удимов
На сайте с 05.05.2010
Offline
274
#14
Seo2z:
вообще, если с сайтмапом, правильный вид такой:
User-agent: Yandex 

Disallow:
Host: site.ru

User-agent: *
Disallow:

Sitemap: http://site.ru/sitemap.xml

Спасибо, привел в порядок свой роботс и я

Топвизор — аккредитованный регистратор доменов .ru и .рф (https://topvisor.com/ru/domain-registration/) — честная цена 299 руб. за регистрацию и продление.
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий