синтаксис тегов для роботов

M
На сайте с 05.07.2004
Offline
11
522

Привет всем оптимизаторам.

Возник вопрос: как управлять роботами с помощью тэгов, не прибегая к редактированию robots.txt (если вообще это возможно)? Какие роботы и как реагируют на различные тэги?

Я заметил, что очень часто вообще нет никаких тэгов на страницах сайта, касающихся роботов. Редко встречаются такие тэги:

"<META content=all name=Robots>".

А каков вообще синтаксис тэгов, касающихся роботов?

Например, можно ли закрыть часть страницы для робота, и для всех ли роботов это будет одинаковый тэг?

Заранее благодарен.

ИМХО
I
На сайте с 28.10.2002
Offline
108
#1
Например, можно ли закрыть часть страницы для робота, и для всех ли роботов это будет одинаковый тэг?

Можно, например теги noindex - понимаются во многих поисковых машинах, текст между ними как правило ни индексируется

M
На сайте с 05.07.2004
Offline
11
#2

Кроме тэга ноуиндекс имеется ли ещё какой-нибудь универсальный, который понимают все поисковики одинаково?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий