Составил описание файла robots.txt

12
K2
На сайте с 13.08.2007
Offline
27
1663

Здраствуйте!

Составил описание файла robots.txt вот такое:

User-Agent: Yandex

Disallow:

Host: www.sait.ru

User-Agent: *

Disallow:

Это значит что индексирует страницы только яндекс? Если да то, что нужно дописать что бы индексировал рамблер и гугл?

402667269
sud falke
На сайте с 24.11.2006
Offline
60
#1
Kirill2199:
User-Agent: Yandex
Disallow:
Host: www.sait.ru

условие для робота Yandex - ничего не запрещено к индексации, основное зеркало www.sait.ru

Kirill2199:
User-Agent: *
Disallow:

условие для любого робота - ничего не запрещено к индексации

Люблю эту компанию Venta (http://www.promo-venta.ru)
Scooby
На сайте с 07.09.2007
Offline
32
#2

Вы указали главное зеркало с www для Яндекса, а также разрешили индексацию сайта для всех ботов. Как, интересно, вы составляли robots.txt, если не в курсе, что он означает? ;)

женский бойцовский клуб (http://www.w-f-c.net) WFC
Scooby
На сайте с 07.09.2007
Offline
32
#3

sud falke, хм.. не успела ;)

K2
На сайте с 13.08.2007
Offline
27
#4

Ну как обычно составляеться ctrl+C

K2
На сайте с 13.08.2007
Offline
27
#5

Тогда не понятно почему сайт выпал из индекса гугла? Был два дня назад, а щас нет.

SergeyK
На сайте с 18.07.2007
Offline
41
#6

Вся правда о robots.txt.

Kirill2199, сайт покажите, может кто и подскажет.

С уважением, Сергей Коваленко.
SF
На сайте с 11.10.2005
Offline
137
#7

Kirill2199, на первый взгляд robots написан правильно.

Но если вы продвигаетесь в Google, можно зарегистрироваться в Google сервисе для веб-мастеров >> Инструменты для веб-мастеров (включая Sitemaps)

Когда зарегистрируете там свой сайт, станет активной закладка "Инструменты" >> "Анализ Robots.txt"

И другие дополнительные вкладки, в которых можно увидеть как Google видит ваш сайт, интерфейс там русский, полностью вся статистика по всем беклинкам... и т.д. и т.п. :)

Инструкция: Как Правильно Делать Сайты: Домен, Хостинг, Установка CMS (http://www.3sd.ru/kak-delat-site/index.php).
G2
На сайте с 11.09.2007
Offline
65
#8
Kirill2199:
Тогда не понятно почему сайт выпал из индекса гугла? Был два дня назад, а щас нет.[/QUOT]
Сколько сайту может в песок ушел? Или конкуренты раскрутили свои
kimberlit
На сайте с 13.03.2007
Offline
370
#9
geo27:

Сколько сайту может в песок ушел? Или конкуренты раскрутили свои

Причём тут индекс и песок с конкурентами? Абсолютно разные вещи!

K2
На сайте с 13.08.2007
Offline
27
#10
SellingFeis:
Kirill2199, на первый взгляд robots написан правильно.
Но если вы продвигаетесь в Google, можно зарегистрироваться в Google сервисе для веб-мастеров >> Инструменты для веб-мастеров (включая Sitemaps)

Когда зарегистрируете там свой сайт, станет активной закладка "Инструменты" >> "Анализ Robots.txt"

И другие дополнительные вкладки, в которых можно увидеть как Google видит ваш сайт, интерфейс там русский, полностью вся статистика по всем беклинкам... и т.д. и т.п. :)

Спасибо за совет! Щас сижу регюсь

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий