Помогите найти тег noindex из-за которго Яндекс неиндексирует!

Н2
На сайте с 09.03.2013
Offline
9
4436

ДОбрый день! Проблема вот какая. Я 14 февраля сделала файл robot txt по правилам.Вот мой файл User-agent: *

Disallow: /cgi-bin/

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: /wp-includes/

Disallow: /xmlrpc.php

Disallow: /wp-admin

Disallow: /wp-content/plugins

Disallow: /wp-content/themes

Disallow: /tag/

Disallow: /page/

Disallow: /trackback/

Disallow: /feed/

Disallow: /comments/

Disallow: */trackback/

Disallow: */feed/

Disallow: */comments/

Disallow: /?feed=

Host: krutobussines.ru

Sitemap: http://krutobussines.ru/sitemap.xml

User-agent: Yandex

Disallow: /cgi-bin/

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: /wp-includes/

Disallow: /xmlrpc.php

Disallow: /wp-admin

Disallow: /wp-content/plugins

Disallow: /wp-content/themes

Disallow: /tag/

Disallow: /page/

Disallow: /trackback/

Disallow: /feed/

Disallow: /comments/

Disallow: */trackback/

Disallow: */feed/

Disallow: */comments/

Disallow: /?feed=

После этого установила ЧПУ.Все сделала как надо. Но после этого заметила, что яша не индексирует новые посты и робот кроме главной страницы никуда не ходит. Сайт http://krutobussines.ru, получается запрещены к индексации все рубрики, которые находятся слева!

Зашла в вебмастер и там оказалось вот что все мои рубрики

содержит мета-тег meta name="robots" со значением content="noindex" или content="none". Если вы намеренно запретили доступ к этим страницам, то исправлять ничего не требуется.

Если вы самостоятельно не размещали мета-тег и считаете, что эти страницы должны индексироваться, то рекомендуем вам обратиться к разработчикам вашего сайта или к хостеру.

Дату наличия запрещающего мета-тега в документе вы можете видеть напротив каждой исключенной страницы в графе «Последнее посещение». Если с момента последнего обращения робота страницы стали доступными, то они автоматически будут проиндексированы по мере обхода сайта, после чего появятся в поиске с обновлениями поисковых баз. То есть это было 14.02.

Cайт точно не в бане, отписывалась Платону, он сказал ищите noindex, удалила плагина СЕО ПАк платинум, где по умолчанию стояла галочка "noindex на архив" и "noindex к югу страницы", так как ставила плагин в это же самое время примерно.

Вроде все почистила, в админке галочку на запрет индекс не ставила, в исходном коде смотрела, плагин удалила три дня назад, а позавчера Яндекс опять выплюнул из выдачи 1/3, уже страниц то почти не осталось.Робот кроме главной страницы никуда не ходит.

Помогите найти этот тег пжта! Отблагодарю того, кто найдет где он спрятан.

Y
На сайте с 05.03.2013
Offline
1
#1

Когда-то была похожая проблема на цмс-ке джумла, как в итоге выяснилось, все из-за включения ЧПУ. отключите или в настройках покапайтесь, думаю 90% что из-за этого

Самая дешевая раскрутка видео на youtube.com - 500р за 20 000 просмотров (/ru/forum/778368)
Н2
На сайте с 09.03.2013
Offline
9
#2

ЧПУ был установлен чуть раньше, и после этого сайт был проиндексирован, страницы появлялись в поиске

Я_Рожден_В_СССР
На сайте с 21.08.2010
Offline
75
#3

Кажется Disallow: /page/ тут лишнее.

L
На сайте с 16.09.2012
Offline
11
#4

А это: Disallow: /page/ что такое?

Н2
На сайте с 09.03.2013
Offline
9
#5

Disallow: /page/ если лишнее тогда почему не написали запрет в robot txt , а в вебмастере именно отдельным пунктом прописано, что тег запрещающий noindex стоит

L
На сайте с 16.09.2012
Offline
11
#6

Однозначно, что вот этим Disallow: /page/,

Вы сами запретили роботу лазить по страницам

Н2
На сайте с 09.03.2013
Offline
9
#7

я удалила.А почему не было написано в robot txt запрет

---------- Добавлено 09.03.2013 в 13:26 ----------

Странно, что этот Disallow page указан в лучших сео блогах, как составить robot txt)))Вы думаете, дело точно в этом?

L
На сайте с 16.09.2012
Offline
11
#8

Поисковый робот проиндексировал все страницы, которые были до написания запрета. Вы сами запретили ему ходит на страницы, он и перестал, по вашему желанию. Выполнил указание, прописанное в robots.txt

kimberlit
На сайте с 13.03.2007
Offline
370
#9
Я_Рожден_В_СССР:
Кажется Disallow: /page/ тут лишнее.
legovih:

Однозначно, что вот этим Disallow: /page/,
Вы сами запретили роботу лазить по страницам

Вы на сайт хоть заходили?

L
На сайте с 16.09.2012
Offline
11
#10

Заходил, уже лишняя строка убрана. А вообще и без захода все понятно было.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий