Правильный robots.txt для форума на основе движка VB ?

Zegaldis · 2005-08-09T01:48:04.0000000Z

Есть форум на основе движка VB, для того чтобы поисковики не индексили в нем мусор или странички к которым без регистрации все равно нет доступа, я создал robots.txt следующего содержания: ======================= User-agent: * disallow: /calendar.php disallow: /member.php disallow: /register.php disallow: /private.php disallow: /search.php disallow: /sendmessage.php disallow: /showpost.php disallow: /printthread.php disallow: /newthread.php disallow: /newreply.php disallow: /memberlist.php disallow: /usercp.php ======================= Прошу посмотреть и покритиковать Также прошу подсказать является ли правильным решение ======== disallow: /newthread.php ======== для УРЛов вида: http://xxxxxxx/newthread.php?do=newthread&f=21

C

120

Cherny

10 августа 2005, 07:05

#11

Вроде бы там все нормально, но детально не проверял.

Сергей, не совсем там правильно - в секции для всех роботов не надо отделять пустой строкой User-agent: * и первую строку с Disallow:

С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)

145

Piligrim

10 августа 2005, 09:33

#12

Юзабилити :)

Директив (http://directiv.ru) - поисковый маркетинг Адвербо (http://adverbo.ru) - продвижение с ежедневными списаниями за топ или трафик

145

Piligrim

10 августа 2005, 14:49

#13

disallow: /report.php.php

Тааак, спасибо этому форуму, сам же у себя опечатку нашел :D

В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах

Зачем быть уникальным в мире, где все можно скопировать