Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Проверьте robots

SpikePro
На сайте с 16.10.2009
Offline
185
SpikePro
356

Сабж.

Нужно чтобы индексировалось только яндексом и гуглом

Все ли правильно?


User-agent: Yandex
Disallow: /
User-agent: Googlebot
Disallow: /

Синтаксис оставлять такой же? все пробелы и т.д. ?

Распродажа старых доменов от 1$! кликай -> (/ru/forum/855733) [обновлено сегодня! 26.09.2014]
K
На сайте с 31.01.2001
Offline
737
Kost
#1

Все неправильно.

http://help.yandex.ru/webmaster/?id=996567 - читайте.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
muratti
На сайте с 31.05.2008
Offline
238
muratti
#2
SpikePro:
Disallow: /

Такая конструкция запрещает, а не разрешает.

SpikePro:
Нужно чтобы индексировалось только яндексом и гуглом

Либо из предложения выпало "не".

S
На сайте с 28.10.2005
Offline
319
semenov
#3 


User-agent: Yandex

Disallow:



User-agent: Googlebot

Disallow:



User-agent: *

Disallow: /
SpikePro
На сайте с 16.10.2009
Offline
185
SpikePro
#4
Kost:
Все неправильно.
http://help.yandex.ru/webmaster/?id=996567 - читайте.
muratti:
Такая конструкция запрещает, а не разрешает.
Либо из предложения выпало "не".

Точно, спасибо :)

"не" не выпадало - запрос в 1 посте правильный - надо разрешить индексировать яндексу и гуглу, другим запретить :)

User-agent: Yandex
Allow: /

User-agent: Googlebot
Allow: /

Так лучше будет?

пробелы, вводы - всего хватает?

Другие роботы (bing, rambler) после такого robots индексировать не будут?

Или их надо прописать отдельно?

Если не затруднит - напишите, плиз, что мне надо скопировать в свой Robots.txt чтобы разрешить индексировать яндексу и гуглу, другим запретить (это будет легче чем объяснить мне, старому домейнеру как составить этот robots) :)

Заранее спасибо всем за потраченное время :)

Яндекс.Поиск: почему находится все Как повлиять на скорость Составление файла robots.txt
K
На сайте с 31.01.2001
Offline
737
Kost
#5

SpikePro, вам написали ответ в посте #4.

Что вам еще надо? Хотите пофлудить?

А вот хрен вам. Тема закрывается.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий