Как продвинуть и сделать правильный robots.txt для html сайта

123
W
На сайте с 08.03.2013
Offline
22
#11
oxg:
"Как продвинуть и сделать правильный robots.txt для html сайта"\
мучайюсь в html5 ) ... ребята роботс- на мой взгляд -только для ограничения

Это понятно, что для ограничения. Но конкретно, что запрещать в хтмл?

R
На сайте с 28.03.2006
Offline
128
#12
Из своего 12 летнего опыта, для html сайта можно робот и не делать
Зачем на хтмл роботс???? Он что дубли умеет делать?

Непрописывание директивы Host и особенности алгоритмов зеркальщика яндекса крайне способствует тому что владельцы

SiteCopy 4.1 и аналогичных продуктов по массовому клонированию сайтов чувствуют уверенность в завтрашнем дне...

База сайтов Яндекс каталога (http://www.plati.com/asp/pay.asp?idd=2082558&ai=508952) (Март, 2016).
sear4er
На сайте с 04.03.2010
Offline
756
#13

redroot, Директива хост от этого не спасет. Курите форум.

Профессиональный SEO аудит с гарантией результата (форум). ( /ru/forum/824674 ) EVOLUTION SEO - Оптимизация, продвижение сайтов, вывод из под фильтров (личный сайт). ( https://evoseo.ru ) Бесплатные SEO консультации. ( https://evoseo.ru/seo-consultaciya/ )
oxg
На сайте с 08.08.2011
Offline
218
oxg
#14
wooferok:
Это понятно, что для ограничения. Но конкретно, что запрещать в хтмл?

вам сказали:

User-agent: *

Host: mysite.com

Sitemap: http://mysite.cоm/sitemap.xml

для закрытия страниц/

Disallow: /****/

Но конкретно, что запрещать в хтмл?

что именно закрывать?

Прокси IPv6 Россия (http://proxy-ipv6.ru/proxy_ipv6.html) /32 сеть, каждый IP в отдельной /48 сети Прокси IPv4 (http://proxyk.ru/proxy-russia.html) более 160 подсетей А,B,C Прокси для Инстаграм (http://proxy-ipv6.ru/instagram-proxy.html)
W
На сайте с 08.03.2013
Offline
22
#15
Непрописывание директивы Host и особенности алгоритмов зеркальщика яндекса крайне способствует тому что владельцы
SiteCopy 4.1 и аналогичных продуктов по массовому клонированию сайтов чувствуют уверенность в завтрашнем дне...

Спасибо, этого не знал.

R
На сайте с 28.03.2006
Offline
128
#16
Директива хост от этого не спасет. Курите форум.

При прочих равных условиях (я не рассматриваю заведомо проигрышные схемы вида "донор на домене третьего уровня а реципиент на домене второго уровня") - спасёт, на мнение форумных Экспертов - пофиг - я практик :)

Добавлю лаконичную формулировку текущей ситуации от корпорации Зла:

Директива 'Host' не гарантирует выбор указанного главного зеркала, тем не менее, алгоритм при принятии решения учитывает ее с высоким приоритетом.

help.yandex.ru/webmaster/controlling-robot/robots-txt.xml#host

The WishMaster
На сайте с 29.09.2005
Offline
2542
#17
redroot:
Непрописывание директивы Host и особенности алгоритмов зеркальщика яндекса крайне способствует тому что владельцы

А что мне мешает скопировать сайт и прописать свой хост? :D

Кому старенького креативного копирайтера? Тематики - туризм, СЕО, творчество, кулинария, шизотерика :)
R
На сайте с 28.03.2006
Offline
128
#18
А что мне мешает скопировать сайт и прописать свой хост?

Ничего не мешает, но в случае если у донора и у реципиента есть корректно прописанные директивы host, то алгоритм принимает решение о выборе главного зеркала исходя из других параметров.

А в случае если у донора ничего нет, а у реципиента есть запись явно указывающая что именно он - главное зеркало, то алгоритм при принятии решения учитывает ее с высоким приоритетом.

alaev
На сайте с 18.11.2010
Offline
861
#19
wooferok:
Просто в интернете говорят, что хтмл сайты очень сложно продвигать.

Поисковики видят только html и им вообще ровно на чем и как сделан ваш сайт.

Указать sitemap в robots для визитки - это вы сильно :)

Создание и продвижение сайтов - https://alaev.net , аудиты сайтов, контекстная реклама
S
На сайте с 17.12.2008
Offline
300
#20
wooferok:
Вопрос состоит в следующем: "Как сделать правильный файл роботс для сайтов html? Сайт был сделан на Adobe Muse (не рекламная ссылка, просто для наглядности http://ymakara.com.ua).
А также вопрос: "Как лучше всего продвинуть хтмл сайт? (можно не расписывать досконально, а привести примеры)
Заранее спасибо за ответы

Так там страниц-то 8 штук, роботс-то зачем вообще нужен?

15 жирных вечных ссылок с трастовых сайтов с высоким ТИЦ ( https://goo.gl/zd62Qa ) Найдем и устраним SEO-ошибки Вашего сайта, которые мешают продвижению ( https://goo.gl/gHsx1U ) Высококачественный рерайтинг: 50 р. / 1000 знаков ( https://goo.gl/5xDmhE )
123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий