Что делать с URL rewriting? Помогите!

123
[Удален]
#11

mixb, некоторые локальные файрволы позволяют задавать произвольный User-agent. В конце концов, можно подключаться телнетом на 80 порт и вводить http-запрос вручную, с нужным полем User-agent.

M
На сайте с 16.01.2003
Offline
129
#12

Проще использовать Оперу, у ее установить свой юзер агент "Опера" и тестить

M
На сайте с 16.01.2003
Offline
129
#13

Вопрос возник: если Яндекс шарит как простой юзер и ставит ссылки в очередь, а индексирует под другим именем - то что же получается -фигняс. Как простой юзер он наберет ссылок с сессиями, потом уже как робот будет их индексировать, запрашивая их урл с сессиями, ошибки 404 конечно не будет, он их получит, но и толку не будет тоже. Будут дублироваться как и раньше...

[Удален]
#14

mixb, Яндекс не как простой юзер шарит. :) А именно как Yandex.*D - добавляет ссылки и Yandex.*I - индексирует.

M
На сайте с 16.01.2003
Offline
129
#15

Interitus,спасибо, это радует, буду тогда переписывать слегка прогу

C
На сайте с 19.09.2001
Offline
120
#16
А именно как Yandex.*D - добавляет ссылки и Yandex.*I - индексирует.

Не совсем правда.

Yandex.*D добавляет ссылки с одной страницы при ручном добавлении ее через форму сабмита.

Yandex.*I индексирует и добавляет ссылки последующих страниц.

Yandex/1.03.000 (compatible; Win16; M)

Это подсветчик.

С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)
M
На сайте с 16.01.2003
Offline
129
#17

Еще вопрос: сайт динамический и содержит 3-х уровневый каталог товаров. Т.е. имя раздела, имя подраздела, товар. Причем, все три уровня являются ссылками. Разделы -> подразделы -> товары -> описание товара. Есть подозрение, что такие страницы не получат высокого рейтинга при индексации из-за обилия ключевых слов (например, слово "кабель" может встретиться 30 раз на одной странице, что составит около 12% от всех слов)

Это верно?

Может, надо сделать ссылки где-нибудь Жабой, чтобы яндекс их не понял?

Или вообще запретить индексацию какого-нибудь уровня?

Или еще способы есть какие?

K
На сайте с 31.01.2001
Offline
737
#18

Если вы наверняка знаете, какая плотность лучше, можно попробовать использовать тег <noindex>. А делать ссылки жабой - это прямо из "вредных советов" Яндекса :-). ИМХО, если страницы с контентом, зачем же их закрывать?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
M
На сайте с 16.01.2003
Offline
129
#19

Да чтобы этот милый Яндекс по своим черте-каким правилам не счел все это спамом!

K
На сайте с 31.01.2001
Offline
737
#20

Тут все просто: обмана нет - спама нет. Для магазинов и каталогов товаров эта ситуация с большой плотностью слов часто встречается.

123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий