А как ya относится к ссылкам на кириллице типа site.ru/ключевоеслово.htm ?

Как Вы думаете: http://www.yandex.ru/yandsearch?clid=13999&yasoft=barff&text=wiki%20%D0%BA%D0%B8%D0%B5%D0%B2&lr=0

А вы считаете этот пример показательным?

На этой неделе нашел пару сайтиков не в индексе яши. Сайты неплохие, банить вроде нет за что..

а не в индексе. Дого изучал, в итоге получилась такая ерунда, что в принципе если скопировать урл странички из ХТМЛ кода, а потом скормить его браузеру - вылетим на 404-ю страницу. Если работать штатными методами - все ОК. Просто сайт в ЮТФ-8 и урлы тоже. Когда делаю просмотр кода, то копирую якобы 1251..... и ФФ перекодирует уже как 1251, в итоге число байтиков в урле в 2 раза меньше.... на той стороне не понимают :-(. В общем есть заморочка.....

Вот теперь чешу репу - ну неспроста они не в индексе ☝ , может Яша тоже с русскоязычными урлами в ЮТФ-8 не дружит? А может просто реализовано криво (полюбому на серверной стороне можно было предусмотреть и другие кодировки...)

На своих проектах рисковать не стал-бы...

urlencoding() для этого есть ;)

та есть, я ж не спорю....

Просто совпало интересно, заставило задуматься...

Хотя urlencodе() далеко не панацея - все зависит от алгоритмов. Представьте, что страничка стягивается, переводится в однобайтную кодировку (например для единства хранения документов в базе, Вы ведь не храните в своей БД половину страниц в ЮТФ, половину в 1251), сохраняется и только потом робот берет из нее ссылки.... тут уже urlencode() пролетит как фанера над Парижем - совершенно другой линк выйдет.

википедия так работает, но бывают проблемы.

Яше всеравно, а вот настроить сервак так, чтобы он такие урлы коректно понимал независимо от кодировок и регионов - это маленькое, но искуство

Запрос показательный, но каждый из ключевиков себя ведет по разному в этом урле... :)