Сайт не индексируется яндексом...

12
project33
На сайте с 30.04.2011
Offline
94
#11
User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /cli/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /jajobboard/
Disallow: /soiskatelyam/
Disallow: /jaview/
Disallow: /*mailto*
Disallow: /*start*
Disallow: /*print*
Disallow: /*feed*
Disallow: /*search*
Disallow: /*users*
Disallow: /index.php?
Disallow: /index.html
Disallow: /*?
Disallow: /*%
Disallow: /*&
Disallow: /index2.php
Disallow: /index.php
Disallow: /*filter_job_list
Disallow: /*?cat_id

это все убирайте

O
На сайте с 02.03.2012
Offline
20
#12
project33:
это все убирайте

Несколькими постами раньше мне наоборот советовали добавить для яндекса правила индексации... кому верить?

Купить яндекс маркет отзывы. (https://vk.com/yandexmarket_blogspot) Яндекс маркет отзывы о магазине. (http://yandexmarket.blogspot.com)
project33
На сайте с 30.04.2011
Offline
94
#13

советовали добавить карту сайта для яши. никто не говорил создавать раздел с точной копией отдельно для яши

O
На сайте с 02.03.2012
Offline
20
#14

А вот еще такой вопрос, к знатокам)) Проверил сайт программкой site-auditor, увидел что гуглом проиндексировано 100+ страниц сайта. Перешел посмотреть, что там за страницы. Получается что примерно 40 страниц действительно в индексе, а остальные 60 являются дублями вроде www.gibkiygrafik.by, gibkiygrafik.by или ссылки с index.php и без, а также ссылки со всякими модулями, компонентами и плагинами (joomla). И это очень печально, потому что в роботсе у меня стоит Disallow на эти пункты.

Некоторые из них в индексе, не смотря на файл роботс, а некоторые в индексе, но вместо описания страницы гугл пишет "Описание веб-страницы недоступно из-за ограничений в файле robots.txt".

В чем дело, как поисковик индексирует данные дубли при запрете в роботсе и как это исправить?

Заранее благодарен!

sentines
На сайте с 30.10.2013
Offline
25
#15

Гуглу иногда пофиг на настройки роботса, хавает все подряд, в том числе и дубли... Убирайте дубли, а не закрывайте их и будет вам счастье! (Редиректы с ввв на без ввв, со \ на без него, с индекс.пхп и т.п.)

Продвижение сайтов в Перми (http://a2-pr.ru/prodvizhenie-saitov/) Интернет-магазин строительных материалов в Перми (http://baza59.ru)
O
На сайте с 02.03.2012
Offline
20
#16
sentines:
Гуглу иногда пофиг на настройки роботса, хавает все подряд, в том числе и дубли... Убирайте дубли, а не закрывайте их и будет вам счастье! (Редиректы с ввв на без ввв, со \ на без него, с индекс.пхп и т.п.)

Я уже выше писал про далеко не лучшие знания и, возможно, глупые вопросы)

Но я действительно не знаю какие файлы нужно править (и впринципе, каким образом это делается) в плане редиректов....

Так уж сложилось, что использую я несколько модулей, в которых множество компонентов, к которым есть еще плагины и т.д. И каким образом (способом) мне сделать редирект с ввв.домен.ру на просто домен.ру, или с домен.ру/модуль/категория/материал на домен.ру/материал...... ??

До сих пор я думал что роботс от этого спасает, а тут облом)

O
На сайте с 02.03.2012
Offline
20
#17
osyst:
Я уже выше писал про далеко не лучшие знания и, возможно, глупые вопросы)

Но я действительно не знаю какие файлы нужно править (и впринципе, каким образом это делается) в плане редиректов....

Так уж сложилось, что использую я несколько модулей, в которых множество компонентов, к которым есть еще плагины и т.д. И каким образом (способом) мне сделать редирект с ввв.домен.ру на просто домен.ру, или с домен.ру/модуль/категория/материал на домен.ру/материал...... ??

До сих пор я думал что роботс от этого спасает, а тут облом)

Так и не получил ответа на последний вопрос, поэтому АПну)

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий