Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Подскажыте правильно я создал robots.txt ??

12
Nazar_94
На сайте с 21.08.2009
Offline
99
Nazar_94
#11

Ну а как правильно должен выглядит robots.txt для сайта ДЛЕ ?? Пример можете написать ?

[Удален]
#12

Я ставлю так:

User-agent: *

(или Yandex или для яндекса одно, для остальных другое)

Disallow: /*print
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Sitemap: http://www.вашсайт.ru/sitemap.xml
Host: www.вашсайт.ru

("_" - убрать!!)

и чтоб не поклеил страницы в одну (по годам, месяцам, дням) иногда добавляю, как пример для новостей за 2009 год (я использую на сайтах тип1 http://site.ru/id-имя новости.html

Disallow: /2009/
Nazar_94
На сайте с 21.08.2009
Offline
99
Nazar_94
#13
drinkins@list.ru:
Я ставлю так:

(или Yandex или для яндекса одно, для остальных другое)

("_" - убрать!!)
и чтоб не поклеил страницы в одну (по годам, месяцам, дням) иногда добавляю, как пример для новостей за 2009 год (я использую на сайтах тип1 http://site.ru/id-имя новости.html

Спасибо за ответ !!!☝

N
На сайте с 06.02.2007
Offline
22
naglets
#14
kimberlit:
Что за ахинея с $ и точкой?

Уважаемый,

Disallow: /*.print$ не ахинея вовсе :) Вы не в курсе немного

Пустите доброго человека, а не то он выломает дверь!
kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#15
naglets:
Уважаемый,
Disallow: /*.print$ не ахинея вовсе Вы не в курсе немного

Ну, давай. Просвети ...

N
На сайте с 06.02.2007
Offline
22
naglets
#16
kimberlit:
Ну, давай. Просвети ...

Проверьте через Я вэбмастер.

kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#17
naglets:
Проверьте через Я вэбмастер.

Школьнег, ты хоть структуру сайта ТС видел?

Страница для печати имеет вид:

http://giper4arka.ru/print:рage,1,729-doktor_haus_6_skachat.html

И куда ты применишь тот бред, который ты мне написал в личку про "Запрещает индексацию с расширением .print" ... Где тут расширение .print?

А теперь сам пойди в ЯВебмастер и проверь ...

N
На сайте с 06.02.2007
Offline
22
naglets
#18
kimberlit:
Школьнег, ты хоть структуру сайта ТС видел?
Страница для печати имеет вид:
http://giper4arka.ru/print:рage,1,729-doktor_haus_6_skachat.html
И куда ты применишь тот бред, который ты мне написал в личку про "Запрещает индексацию с расширением .print" ... Где тут расширение .print?

А теперь сам пойди в ЯВебмастер и проверь ...

Cимвол «$» в качестве "конца строки" блокирует адреса с заданным динамическим параметром, независимо от того, где в адресе данный параметр встречается, а также блокировать все файлы с определенным расширением.

kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#19
naglets:
Cимвол «$» в качестве "конца строки" блокирует адреса с заданным динамическим параметром, независимо от того, где в адресе данный параметр встречается, а также блокировать все файлы с определенным расширением.

Ты не копипасть, а ответь просто на вопрос.

Закроет ли твоё "Disallow: /*.print$" вот эту страницу ТС - http://giper4arka.ru/print:рage,1,729-doktor_haus_6_skachat.html ?

ЗЫ И второй вопрос на сообразительность ...

Страница http://giper4arka.ru/print:рage,1,729-doktor_haus_6_skachat.html имеет расширение .print?

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий