Drakasmit

Drakasmit
Рейтинг
90
Регистрация
21.05.2008
Должность
Мой мозг
Интересы
Ваш мозг
Не думаю

Psionic, http://pronfs.ru/robots.txt те поля что с /forum/ тебе не нужны.

SiriuS:
А все эти боты слушаются роботс и перестают ходить по сайту?

В теории да, в логах не проверял.

SiriuS:
(сапа например)

сапа просто так сайт индексить не полезет, если он в систему не добавлен

в буржунете нашёл htaccess, посмотри может чем поможет

txt htaccess.txt

1lvl :)

Drakasmit добавил 11.07.2009 в 08:30

о, там оказывается можно до 9700 набрать

ps Crawl-delay по желанию прописывать иии disallow для нужных ботов удалить :)

txt robots.txt

http://datalife-engine.net/blog/hacks/36.html

Drakasmit добавил 11.07.2009 в 08:15

только там в конце, где написано "правильный роботс txt будет выглядеть так" бота яндекса нужно вверх перенести

ещё бы понять по какому принципу яндекс транслитирует, например введя запрос "скутер" можно увидеть подсвеченный адрес ckytep...

zurk:
Знаю что не учитывает

да вы что? ссылки прекрасно влияют на нк запросы

fatalenergy:
Ссылки маскировать нужно, а для этого нужно как минимум саповский класс переписать.

Оптимизаторы платят за размещение ссылки на странице, чтобы она была видна как боту так и человеку, зачем маскировать ссылки?

Reraiterw:
традиционно <noindex>....</noindex>

не порите чушь, это для яндекса атрибут. и если так сделать сапа такие ссылки в error переведёт

zord, из за одной ссылки со страницы думаю гугл не покарает, маскировать ссылки не нужно, просто оформите по человечески

stasnokia:
CroCuZ, зачем вам тиц ?

вы ссылки никогда не продавали? :)

Всего: 664