Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Robots.txt если не трудно.. помогите

X
На сайте с 19.11.2006
Offline
31
x007xx
661

Читал хел для новичков.. , но там в основном обсуждается как ставить ноиндекс, а как прописать это в роботе... я не вкуриваю..

Если это не сложно, поажите как должен выглядеть робот для яндекса, чтобы в коде работали теги ноиндекс

di_max
На сайте с 27.12.2006
Offline
262
di_max
#1
x007xx:
Если это не сложно, поажите как должен выглядеть робот для яндекса, чтобы в коде работали теги ноиндекс

Ни как. Это 2 совершенно различные вещи...

// Все наши проблемы от нашего не знания...
latin
На сайте с 15.04.2006
Offline
94
latin
#2

x007xx,

http://robotstxt.org.ru/

Последний раз редактировалось Платон Щукин, Сегодня в XX:xx.
mallboro
На сайте с 17.07.2006
Offline
117
mallboro
#3

в роботсе, в частности, можна запретить индексировать страничку полностью. Ноунидекс в свою очередь предназначен для того, чтобы закрыть от индексации определенную часть контента на странице (например, дубликат или ссылки)

Здесь я покупаю и продаю качественные ссылки навсегда (http://www.gogetlinks.net/register_user.php?inv=jzh9ss) Размещение в англоязычных каталогах статей под ключ ()
MASe
На сайте с 17.09.2002
Offline
219
MASe
#4

если в роботске для запрещения индексирования страниц Вам надо писать следующее:

User-agent: *
Disallow: /papka1/
Disallow: /papka2/

то в самом коде, для запрещения индексирования какой-то части кода Вы уже будете использовать

<noindex>
текст, который не хотите показывать роботам
</noindex>

однако помните, что тег "ноиндекс" - читается русскими роботами, и игнорируется Гуглом... для Гугла же эфект неиндексируемости ссылки, к примеру, достигается через опцию rel="nofollow", например:

< a href="http://site.ru/ "rel="nofollow">ссылка на сайт</a>

Only God Can Judge Me... Nobody Else... Дрезна (http://www.drezna.ru/) Помощники: Sape (http://www.sape.ru/r.167724536c.php)
eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие
X
На сайте с 19.11.2006
Offline
31
x007xx
#5
MASe:


то в самом коде, для запрещения индексирования какой-то части кода Вы уже будете использовать
<noindex>
текст, который не хотите показывать роботам
</noindex>

<noindex> </noindex> я прописываю в коде... а в Robots.txt нужно ли что нибудь писать.?

MASe
На сайте с 17.09.2002
Offline
219
MASe
#6
x007xx:
<noindex> </noindex> я прописываю в коде... а в Robots.txt нужно ли что нибудь писать.?

может быть повторюсь...

но...

в роботсе вы запрещаете к индексации страницы, а ноиндексе же - только часть контента

соответственно, если в ноиндекс внесли часть контента, а остальная страница должна индексироваться, то дополнительно ничего писать не надо...

если же наоборот, вы хотите запретить страницу - пропишите ее в роботсе, а ноиндекс оставьте в покое...

;-)

Пагинация Как в моем случае Как в robots.txt закрыть

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий