Форум Практика оптимизации Любые вопросы от новичков по оптимизации

robots.txt как правильно?

AS
На сайте с 18.12.2010
Offline
16
alexanderSA
497

На сайте есть страницы вида:

/print:7777

/engine/print.php?do=static&page=7777

/print:7777

Как правильно запретить эти стр в роботсе тхт правильно что написать нужно???

Заранее спасибо!

Специалист по контекстной рекламе. Создание, введение и аудит рекламных кампаний. youintop@yandex.ru
DO
На сайте с 20.01.2010
Offline
55
dustyo_O
#1

Disallow: /print

Disallow: /engine/print.php

платно проведу аудит сайта и исправлю все технические проблемы, которые могут мешать продвижению (/ru/forum/594052)
Slavietto
На сайте с 28.06.2009
Offline
76
Slavietto
#2
dustyo_O:
Disallow: /print
Disallow: /engine/print.php

полный вид:

User-agent: *

Disallow: /print

Disallow: /engine/print.php

DO
На сайте с 20.01.2010
Offline
55
dustyo_O
#3

откуда вы знаете, что у ТСа только User-Agent: * и больше нет никаких правил в robots.txt?

schwebpes
На сайте с 08.02.2011
Offline
10
schwebpes
#4

Простите за офтопик, конечно...

ТС - скажите, а такие адреса страниц у вас нормально работают? Если у хостёра какие-то порты закрыты для доступа (а ведь запись adress.st/print:7777 должна означать для браузера идти на print через порт 7777) - преобразование происходит?

А что выдаёт сервер при адресах, скажем /print:21 или /print:110 ??

"Профессиональные Комплексные Решения" (http://prcs.ru) - IT-директор Использую СеоПульт (http://seopult.ru/ref.php?ref=820be88242cc323a)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий