robots + wordpress + дубли

Q
На сайте с 03.10.2011
Offline
323
739

Подскажите пожалуйста, что мне нужно изменить в роботс, чтобы открыть форум.

Форум лежит в папке - /форум/

Содержание роботс


User-agent: *
Disallow: /wp-admin
Disallow: /navigator
Disallow: /navigator/
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /xmlrpc.php
Disallow: /wp-content/uploads
Disallow: /wp-content/themes
Disallow: /trackback/
Disallow: /tag/
Disallow: /feed/
Disallow: */*/feed/*/
Disallow: */feed
Disallow: */*/feed
Disallow: /*?*
Disallow: /?feed=
Disallow: /?s=
Disallow: /author/admin/


User-agent: Yandex
Disallow: /wp-admin
Disallow: /navigator
Disallow: /navigator/
Disallow: /wp-includes
Disallow: /xmlrpc.php
Disallow: /wp-content/uploads
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback/
Disallow: /tag/
Disallow: /feed/
Disallow: */*/feed/*/
Disallow: */feed
Disallow: */*/feed
Disallow: /?feed=
Disallow: /*?*
Disallow: /?s=
Disallow: /author/admin/
Host: домен
https://seo-progression.ru/ - Настройка рекламы Telegram Ads через eLama тут = https://vk.cc/cHzibk
altezzik
На сайте с 06.11.2011
Offline
247
#1

Вроде не закрыт форум.

Q
На сайте с 03.10.2011
Offline
323
#2
altezzik:
Вроде не закрыт форум.

вот и я уже голову сломал, но при добавление урла в аддурилку, пишет закрыто

altezzik
На сайте с 06.11.2011
Offline
247
#3

А если здесь https://webmaster.yandex.ru/robots.xml проверить, то этот роботс показывается? Может движок подсовывает другой роботс )

Или тег noindex в коде форума спрятался...

S
На сайте с 29.01.2006
Offline
404
#4

qvaro, а в самой папке "форум" нет роботс или хтассесс? И основной хтассесс посмотрите на всякий случай - вдруг там Яндекс заблокирован.

Q
На сайте с 03.10.2011
Offline
323
#5

http://prntscr.com/5mica4

пишет что запрещен через роботс сайта, то есть через роботс WP

K5
На сайте с 21.07.2010
Offline
209
#6

сам форум нормально 200 отдает?

пробуйте вообще убрать вордпрессовый роботс.тхт

аська 45два48499два записки на работе (http://memoryhigh.ru) помогу с сайтом, удалю вирусы, настрою впс -> отзывы ТУТ (/ru/forum/836248) и ТАМ (http://www.maultalk.com/topic140187.html) !!!всегда проверяйте данные людей, которые сами пишут вам в аську или скайп!!!
B4
На сайте с 27.04.2012
Offline
94
#7

Может форум находится на поддомене?

данный robots.txt разрешает сканирование файла.

Q
На сайте с 03.10.2011
Offline
323
#8
kgtu5:
пробуйте вообще убрать вордпрессовый роботс.тхт

после удаления, урл добавился

как думаете, что нужно убрать из роботс?

lockki
На сайте с 03.08.2010
Offline
124
#9
qvaro:
после удаления, урл добавился

как думаете, что нужно убрать из роботс?

собственно вот это правильный robots.txt для вордпресс

после заходите вот сюда https://webmaster.yandex.ru/robots.xml

загружаете роботс с сайта (новый, что по ссылке)

добавляете урл форума и нажимаете проверить.

смотрите каким правилом запрещен форум, но в роботсе выше, он не запрещен + закрыты все возможные дубли на сайте.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий