Нормально ли созадан robots.txt?

P
На сайте с 27.07.2009
Offline
80
730

Привет! У меня сайт на жумле. Я туда втулил такой роботс.тхт, нету ли там каких-то лаж? Потому что яндекс вебмастер показывается 250 проиндексированных, но в поиске только 2...

User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Disallow: *.pdf$

Disallow: /*print

User-agent: Yandex

Disallow: /administrator/

Disallow: /cache/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Disallow: *.pdf$

Disallow: /*print

Спасибо за любой совет или ответ...

nui
На сайте с 01.05.2010
Offline
139
nui
#1

Зачем дублировать то же самое специально для яндекса? Думаю это лишнее.

F
На сайте с 16.01.2010
Offline
267
#2

Не знаком с структурой Джумлы, но в конце каждого блока нужно дописать Host: site.ru или Host: www.site.ru

futuristian добавил 28.06.2010 в 15:40

А вообще вот мануал

http://help.yandex.ru/webmaster/?id=996567

P
На сайте с 27.07.2009
Offline
80
#3
futuristian:
Не знаком с структурой Джумлы, но в конце каждого блока нужно дописать Host: site.ru или Host: www.site.ru

Это есть, просто убрал, чтобы не считалось, что рекламирую сайт...

Pywkin добавил 28.06.2010 в 15:42

nui:
Зачем дублировать то же самое специально для яндекса? Думаю это лишнее.

Да вот где-то прочитал, что для яндекса нужно специально писать...пост был типа "идеальный роботс.тхт для Жумлы..."

Putnik
На сайте с 02.11.2009
Offline
113
#4

C robots-oм все нормально.

Скорее АГС.

Тематика сайта?

Контент?

Всегда было 2 страницы в поиске или сначала весь сайт был в поиске?

Давно в индексе Яши?

>>> Играй и зарабатывай (https://goo.gl/gC9Xgr) Этот (http://goo.gl/y7LTOS) хостинг хорош, а вот этот лучше (http://goo.gl/y7LTOS)! Хорошие скидки в ЛС! Лучший сервис по мониторингу позиций сайта (http://goo.gl/aQe86s). Возможна оплата xml лимитами.
1
На сайте с 18.05.2010
Offline
10
1kk
#5

"Disallow: /installation/" может путаю, но помоему папку installation нужно удалять после установки джумлы.

[Удален]
#6
nui:
Зачем дублировать то же самое специально для яндекса? Думаю это лишнее.

Нет, не лишнее. Яндекс, конечно, не дурачок — «звёздочку» понимает. Но на всякий случай… ;)

SmileP
На сайте с 18.02.2010
Offline
386
#7

Pywkin, в Я вебмастере можно же проверить

Настройка индексирования> Анализ robots.txt

kimberlit
На сайте с 13.03.2007
Offline
370
#8
futuristian:
но в конце каждого блока нужно дописать Host:

В конце каждого?

WebAlt
На сайте с 02.12.2007
Offline
251
#9
evgeny_kostin:
Нет, не лишнее. Яндекс, конечно, не дурачок — «звёздочку» понимает. Но на всякий случай… ;)

Какой всякий случай? Дубль он и в Африке дубль.

Такие вещи в robots не пишут:

Disallow: /administrator/

Еще логин с паролем пропишите и будет вам счастье 🚬

Robots любой может посмотреть.

Это тоже непонятно зачем, у вас что ссылки на них есть сайта:

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

wturm
На сайте с 01.04.2010
Offline
77
#10

Не стал создавать новую тему,вообщем есть:

домен.Ру

форум.Домен.Ру

Www.Домен.Ру

хотелось бы не навредить сайту и ПРАВЕЛЬНО склеить все это,домен.Ру должен быть главны,т.Е. Весь тиц должен перетекать с форума и www на Главный саит(домен.Ру)

как и где что прописать,чтоб это все работало и не приносило вреда?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий