вопросы по robots.txt

wiefix
На сайте с 25.07.2008
Offline
96
711

Ребятушки привет! у меня стоит форум phpbb2 и яндекс чтото нехочет его индексировать,либо он както коряво его индексирует! У меня вот мысль о том что я чтото неправильно сделал с файлом robots.txt ! Скажите что там нужно правильно написать чтобы все было чики пики ? :))

Вдохновения в картинках (http://2inspire.ru)
anafema
На сайте с 03.05.2008
Offline
12
#1

Ну что Вам сказать, сделайте карту сайта, покажите в роботс yandexу где она находится, запретите яндексу индексировать то, что индексировать не нужно, да и вообще сейчас просту нужно терпение иметь в вопросах индексации....., если нет мочи ждать напишите Платону письмо и спросите, может, что у Вас на сайте не так, может ответят.....

Ниже пример роботс:

User-agent: Yandex

Allow: /

Sitemap: _сайт_ru/sitemap.xml

User-Agent: *

Disallow: /image/

Disallow: /inc/

Damirovich
На сайте с 18.11.2007
Offline
61
#2

адрес своего сайта скажите...

РЕАЛЬНЕ!!! Самое большое счастье, испытываешь тогда, когда что-то важное теряешь, а потом его же находишь :)))
[Удален]
#3
Damirovich:
адрес своего сайта скажите...

да нафиг вам адрес этого грамотея???

ТС, есть прекрасная кнопка на этом форуме "поиск" её название. Кроме этого есть чуть выше специально прикреплённые темы для таких любознательных как ты - ФАК, там всё есть по твоему вопросу.

wiefix
На сайте с 25.07.2008
Offline
96
#4

кто поможет?или хотябы обьеснить что мне нужно сделать чтобы было все хорошо?

ТК
На сайте с 14.01.2008
Offline
58
#5

wiefix, мог бы свой роботс.ткст сюда выложить..

Тёма К. добавил 25.07.2008 в 23:44

тут посмотри, поботай тему http://robotstxt.org.ru/

кстати,можешь еще добавить свой сайт на webmaster.yandex.ru (требуется регистрация) и следить за индексом, внутренними ссылками, внешними и проч... оч полезно :) и на ошибки твои укажет также 🚬

wiefix
На сайте с 25.07.2008
Offline
96
#6

User-agent: *

Disallow: *

Host: www.secretforum.ru

User-agent: Yandex

Disallow: /admin

Host: www.secretforum.ru

Посмотрите все ли я правильно сделпал?

У меня в панели веб мастера в яндексе он выдает ошибку 302.И еще он страницы индексирует а в поисковике они не появляются!почему?

kimberlit
На сайте с 13.03.2007
Offline
370
#7

User-agent: Yandex

Disallow: /admin/

Host: www.secretforum.ru

Sitemap: http://www.secretforum.ru/sitemap.xml

User-agent: *

Disallow: /admin/

Sitemap: http://www.secretforum.ru/sitemap.xml

Сделай вот так ...

wiefix
На сайте с 25.07.2008
Offline
96
#8

сделал! А в чем разница? расскажи пожалуйста!

Sitemap: http://www.secretforum.ru/sitemap.xml

надо с http:// или без нее в сайт сайтмап?

kimberlit
На сайте с 13.03.2007
Offline
370
#9
wiefix:
сделал! А в чем разница? расскажи пожалуйста!

1. Host - только для Яндекса

2. Disallow: * - ошибка

3. /admin - для директории нужно с закрывающим слешем

4. Sitemap - с http://

читаем мануалы

--------------

wiefix
На сайте с 25.07.2008
Offline
96
#10

Ок! Спасибо Огромное! +1 в голову тебе :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий