Форум Сайтостроение Веб-строительство

ВП + SMF robots.txt

stundr
На сайте с 19.06.2008
Offline
201
stundr
982

Друзья, при проверке страниц форума (установлен в папке /forum) через яндекс вебмастер, яндекс мне пишет:

запрещен правилом /*?*

Подскажите, где у меня ошибка в файле, какую строчку удалить:

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /wp-content/cache/
Disallow: /*?
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Allow: /forum/*sitemap
Allow: /forum/*arcade
Allow: /forum/*type=rss
Disallow: /forum/*rss
Disallow: /forum/attachments/
Disallow: /forum/avatars/
Disallow: /forum/Packages/
Disallow: /forum/Smileys/
Disallow: /forum/Sources/
Disallow: /forum/Themes/
Disallow: /forum/Games/
Disallow: /forum/*.msg
Disallow: /forum/*.new
Disallow: /forum/*sort
Disallow: /forum/*topicseen
Disallow: /forum/*wap
Disallow: /forum/*imode
Disallow: /forum/*action
Disallow: /forum/*prev_next
Disallow: /forum/*all
Disallow: /*PHPSESSID
Disallow: /forum/*go.php
Sitemap: http://site.ru/forum/sitemap.xml
Sitemap: http://site.ru/sitemap.xml
Host: site.ru

User-agent: Slurp
Crawl-delay: 100

User-agent: Twiceler
Disallow: /

User-Agent: W3C-checklink
Disallow: /

User-agent: Yandex
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /wp-content/cache/
Disallow: /*?
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Allow: /forum/*sitemap
Allow: /forum/*arcade
Allow: /forum/*type=rss
Disallow: /forum/*rss
Disallow: /forum/attachments/
Disallow: /forum/avatars/
Disallow: /forum/Packages/
Disallow: /forum/Smileys/
Disallow: /forum/Sources/
Disallow: /forum/Themes/
Disallow: /forum/Games/
Disallow: /forum/*.msg
Disallow: /forum/*.new
Disallow: /forum/*sort
Disallow: /forum/*topicseen
Disallow: /forum/*wap
Disallow: /forum/*imode
Disallow: /forum/*action
Disallow: /forum/*prev_next
Disallow: /forum/*all
Disallow: /*PHPSESSID
Disallow: /forum/*go.php
Sitemap: http://site.ru/forum/sitemap.xml
Sitemap: http://site.ru/sitemap.xml
Host: site.ru
=^_^=
siv1987
На сайте с 02.04.2009
Offline
427
siv1987
#1
stundr:
через яндекс вебмастер, яндекс мне пишет:
запрещен правилом /*?*

Disallow: /*?

stundr
На сайте с 19.06.2008
Offline
201
stundr
#2

насколько я понимаю он нужен для ВП?

или нет?

просто роботс для ВП где то на другом сайте брал с аналогичными настройками ЧПУ.

M
На сайте с 07.06.2011
Offline
49
mrcloud
#3

форум наверняка имеет ссылки с гет параметром. поэтому запрещен

http://spicysales.ru (http://spicysales.ru) - заработок для тематических кулинарных сайтов.
stundr
На сайте с 19.06.2008
Offline
201
stundr
#4

Убрал этот запрет - Disallow: /*?

Теперь при проверке страница разрешена к индексации...посмотрим как будет дело происходить.

А в целом про этот роботс.txt что скажете?

Подойдет для ВП+SMF? или есть более лучшие варианты?

Еще вопрос, в файле 2 раза указывается хост, надо ли один из них убрать? и ставить его надо через строчку? или все правильно в данный момент?

Вопрос по файлу Robots.txt Про robots.txt robots.txt в панели Гугл
kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#5
stundr:
Друзья, при проверке страниц форума (установлен в папке /forum) через яндекс вебмастер, яндекс мне пишет:
запрещен правилом /*?*

Подскажите, где у меня ошибка в файле, какую строчку удалить:

Ты только не говори какие url у форума, а то тут же дадут правильный совет.

Если же с параметрами, то это:

Disallow: /*?

---------- Добавлено 27.01.2012 в 21:31 ----------

stundr:
Друзья, при проверке страниц форума (установлен в папке /forum) через яндекс вебмастер, яндекс мне пишет:
запрещен правилом /*?*

Подскажите, где у меня ошибка в файле, какую строчку удалить:

Ты только не говори какие url у форума, а то тут же дадут правильный совет.

Если же с параметрами, то это:

Disallow: /*?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий