Форум Поисковые системы Яндекс

robots.txt для SMF форума

M7
На сайте с 25.12.2008
Offline
85
maugli77
3361

Доброго времени суток!

Помогите пожалуйста разобраться как правильно составить robots.txt для SMF форума.

Версия форума RC2 компонент карты сайты для форума не установлен.

Пытаюсь запретить работам индексировать страницы для печати и Wap версию форума, а так же запретить индексацию пользовательских профилей, т.е. оставить разрешенной индексацию самого форума и сообщения на форуме с разделами.

Форум установлен в папке forums. Для сайта robots.txt не делал, только для форума. Бросаю файл разумеется в корень самого сайта.

Заранее благодарен!

вот такой файл я составил:

User-agent: *
Allow: /forums/*sitemap
Allow: /forums/*rss
Allow: /forums/*type=rss
Allow: /forums/
Disallow: /forums/attachments/
Disallow: /forums/avatars/
Disallow: /forums/Packages/
Disallow: /forums/Smileys/
Disallow: /forums/Sources/
Disallow: /forums/Themes/
Disallow: /forums/Games/
Disallow: /forums/*.msg
Disallow: /forums/*.new
Disallow: /forums/*sort
Disallow: /forums/*topicseen
Disallow: /forums/*imode
Disallow: /forums/*action
Disallow: /forums/*prev_next
Disallow: /forums/*all
Disallow: /forums/*wap
Disallow: /forums/*wap2
Disallow: /forums/*calendar
Disallow: /forums/*PHPSESSID
Host: wolcha.ru

User-agent: Slurp
Crawl-delay: 100
voencom
На сайте с 04.10.2008
Offline
145
voencom
#1

На форуме SMF 2 темы прикрепленные по robots.txt - http://www.simplemachines.ru/index.php?PHPSESSID=a7de42ef6bf1ee1429c8d7ab1abf6d55&board=57.0 .

Думаю найдете что искали.

M7
На сайте с 25.12.2008
Offline
85
maugli77
#2
voencom:
На форуме SMF 2 темы прикрепленные по robots.txt - http://www.simplemachines.ru/index.php?PHPSESSID=a7de42ef6bf1ee1429c8d7ab1abf6d55&board=57.0 .

Думаю найдете что искали.

Да нашел - спасибо большое!

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий