Форум Поисковые системы Яндекс

/robots.txt глазами Яндекса

1 234
Ctulhu
На сайте с 21.05.2005
Offline
222
Ctulhu
#31
FlyAway:
Для полных тормозов, в robots.txt не работают регулярные выражения, как вы написали. У нас не урок программирования на php.

Андрюх, работают, не так, конечно, и пока для Гугла (примерно так http://www.google.ru/support/webmasters/bin/answer.py?answer=40367). Яндекс может прикрутит их лет через 19 😂

https://atabekov.business
S
На сайте с 28.10.2005
Offline
318
semenov
#32

С роботсом пипец какой-то по жизни у народа, при чем даже у тех, кто вроде не пианеры

Ctulhu
На сайте с 21.05.2005
Offline
222
Ctulhu
#33
semenov:
С роботсом пипец какой-то по жизни у народа, при чем даже у тех, кто вроде не пианеры

Курсы что-ли по роботсу открыть? :D

В общем, официально объявляю об открытии платных консультаций. 700 рублей консультация. Форумчанам 17% скидка 😎

FlyAway
На сайте с 01.06.2005
Offline
439
FlyAway
#34

Ctulhu, так я про Гугль и не спорил Дим, я все про Яндекс, да про Яндекс... =)

Сердюченко Андрей (http://www.serdyuchenko.ru/) Масонская ложа — SЕ-Team.ru (http://goo.gl/YIjV6h) :)
BigBrother
На сайте с 16.06.2006
Offline
96
BigBrother
#35
T.R.O.N:
jorevo, неужели Вы и вправду верите в то, что соглашения RFC - это законы?

Для Яндекса - да. Причем довольно строго.

Если кажется что robots.txt не учитывается - стоит проверить, что на самом деле отдается роботу. И с каким кодом и mime.

So many kings, but few jokers!
1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий