Что такое Robots

12
[Удален]
1357

Что такое <meta name="Robots" content="index,follow">

[Удален]
#1
[Удален]
#2

Так я не могу понять. content="index,follow" это сюда вписывать те страници которые надо чтобы яндекс проиндексировал или наоборот не индексировал?

<meta name="Robots" content="index,follow">

VK
На сайте с 07.02.2008
Offline
4
#3

Тег <meta name="Robots" content="..."> управляет индексацией конкретной web-страницы. При этом роботам можно запретить не только индексацию самого документа, но и проход по имеющимся в нем ссылкам.

Инструкции по индексации записываются в поле content. Возможны следующие инструкции:

NOINDEX - запрещает индексирование документа;

NOFOLLOW - запрещает проход по ссылкам, имеющимся в документе;

INDEX - разрешает индексирование документа;

FOLLOW - разрешает проход по ссылкам.

ALL - равносильно INDEX, FOLLOW

NONE - равносильно NOINDEX, NOFOLLOW

Значение по умолчанию: <meta name="Robots" content="INDEX, FOLLOW">.

В следующем примере робот может индексировать документ, но не должен выделять из него ссылки для поиска дальнейших документов:

<META name="ROBOTS" content="index, nofollow">

Имя тега, названия и значения полей нечувствительны к регистру.

В поле content дублирование инструкций, наличие противоречивых инструкций и т.п. не допускается; в частности, значение поле content не может иметь вид "none, nofollow".

Margo
На сайте с 29.10.2005
Offline
188
#4

Все о robots txt

http://robotstxt.org.ru

[Удален]
#5
ValeriiKo:
Тег <meta name="Robots" content="..."> управляет индексацией конкретной web-страницы. При этом роботам можно запретить не только индексацию самого документа, но и проход по имеющимся в нем ссылкам.

Инструкции по индексации записываются в поле content. Возможны следующие инструкции:
NOINDEX - запрещает индексирование документа;
NOFOLLOW - запрещает проход по ссылкам, имеющимся в документе;
INDEX - разрешает индексирование документа;
FOLLOW - разрешает проход по ссылкам.
ALL - равносильно INDEX, FOLLOW
NONE - равносильно NOINDEX, NOFOLLOW

Значение по умолчанию: <meta name="Robots" content="INDEX, FOLLOW">.

В следующем примере робот может индексировать документ, но не должен выделять из него ссылки для поиска дальнейших документов:

<META name="ROBOTS" content="index, nofollow">

Имя тега, названия и значения полей нечувствительны к регистру.

В поле content дублирование инструкций, наличие противоречивых инструкций и т.п. не допускается; в частности, значение поле content не может иметь вид "none, nofollow".

Если я например хочу чтобы проиндексировал мои страници например

index,stat13-1,stat13.php

То я должен вписать<meta name="Robots" content="index,stat13-1,stat13.php">Правильно?

Dataword
На сайте с 16.08.2007
Offline
14
#6

Jadik, он ваши страницы по умолчанию без этого тега проиндексирует. Этот тег, в основном, используется для запрета индексации страницы.

Информация по метатегам есть у меня на блоге: http://dataword.info/metatags-seo.php

Возможно, это вам поможет понять основы.

Оптимизатор о раскрутке сайта. Авторские наблюдения (http://dataword.info).
[Удален]
#7
Dataword:
Jadik, он ваши страницы по умолчанию без этого тега проиндексирует. Этот тег, в основном, используется для запрета индексации страницы.

Информация по метатегам есть у меня на блоге: http://dataword.info/metatags-seo.php
Возможно, это вам поможет понять основы.

Так,а Вы советуете делать на своем сайте Robots или нет?И есил я на всех страницах пропишу <meta name="Robots" content="index,follow"> это будет правильно?

MadTomas
На сайте с 26.12.2007
Offline
109
#8
Jadik:
Так,а Вы советуете делать на своем сайте Robots или нет?И есил я на всех страницах пропишу <meta name="Robots" content="index,follow"> это будет правильно?

- зачем ? <meta name="Robots" content="index,follow"> и так по умолчанию считается ...

а файл robots.txt имеет смысл на сайт вешать если у Вас есть зеркала, примеру .... Или же в нем прописать какие-то разделы сайта к запрету индексации разными роботами ПС.

Для сайтов о кредитах - отличная партнерская программа (http://cityads.ru/?ref=f020ed52)!!! Качественный контент для ваших сайтов (http://seonest.ru/?pid=68), однозначно!
[Удален]
#9
MadTomas:
- зачем ? <meta name="Robots" content="index,follow"> и так по умолчанию считается ...
а файл robots.txt имеет смысл на сайт вешать если у Вас есть зеркала, примеру .... Или же в нем прописать какие-то разделы сайта к запрету индексации разными роботами ПС.

Ну так если у меня нету в html <meta name="Robots" content="index,follow">

Его желательно вписывать или нет?Если я его впишу ничего страшного?

MadTomas
На сайте с 26.12.2007
Offline
109
#10
Jadik:
Если я его впишу ничего страшного?

апсалютна ничего

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий