Форум Поисковые системы Яндекс

Робот Яндекса теперь понимает Allow !

S
На сайте с 06.07.2009
Offline
41
sotnikwh
668

http://help.yandex.ru/webmaster/?id=996567

Будьте внимательны. :) кто раньше по незнанию писал:

Allow: /

Disallow: /blablabla

Теперь в таком виде роботс.тхт открывает к индексации весь сайт.

K
На сайте с 31.01.2001
Offline
737
Kost
#1
sotnikwh:
Робот Яндекса теперь понимает Allow

Да уж, с 21 декабря 2007 года. Где вы раньше-то были? :)

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
S
На сайте с 06.07.2009
Offline
41
sotnikwh
#2

опс сорри)

я брал информацию отсюда

http://robotstxt.org.ru/RobotstxtErrors

а тут написано что директивы Allow не существует

K
На сайте с 31.01.2001
Offline
737
Kost
#3

Надо читать первоисточники, а не заброшенные ресурсы. Кстати, даже в разделе "Для новичков" это прямо прописано в правилах, для вашей же пользы, со всеми ссылками, читай - не хочу.

S
На сайте с 06.07.2009
Offline
41
sotnikwh
#4
Kost:
Надо читать первоисточники, а не заброшенные ресурсы. Кстати, даже в разделе "Для новичков" это прямо прописано в правилах, для вашей же пользы, со всеми ссылками, читай - не хочу.

спасибо, я оттуда и взял эту ссылку :) из FAQ

Ctulhu
На сайте с 21.05.2005
Offline
222
Ctulhu
#5
Kost:
Надо читать первоисточники, а не заброшенные ресурсы.
This is currently a bit awkward, as there is no "Allow" field.
http://www.robotstxt.org/robotstxt.html

Но в целом, поправлю все, забросил чуток, да. Кстати, делать изменения на сайте может кто угодно, достаточно зарегистрироваться.

Это не столь критично, ибо этот ресурс не основной источник информации, а переведенный фак по роботсу для начинающих.

https://atabekov.business

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий