r0mka, чтобы забанить дор.
Stripe, нет, я хочу узнать правду! :)
dvd_rw, ну так тулбар стоит у не большого количества юзеров, почему яндексу не подумать о том, что это не партнерка, а просто интересный сайт на который ссылается сайт(дор)
BlackEvil, спасибо! Завтра потестим! :)
Apollon1 добавил 30.07.2009 в 02:21
wdsg, под парсером понимаю программу, которая будет копировать контент с сайта и обрабатывать его от лишнего.
Fabio, этот вопрос был не про уникальность, а про логические конструкции (то, что слова в предложении должны быть согласованы и т.д.). Такой алгоритм на мой взгляд может быть только один, как у ворда, без подключения каких либо баз данных!
У Яндекса есть сервисы в которых можно проверить правописание предложения, как в водре - в стиле зеленых подчеркиваний?
Яндекс смотрит на логические конструкции? и банит ли он сайты с текстом например: 5-ть глаголов подряд, 5-ть существительных и т.д.
Видимо, что да.
Посему и вопрос: как яндекс определяет логические конструкции? Таким же образом как и ворд? Другого варианта просто не вижу!
Ну а если этих страниц не мало, более 1000?
ColdMAN, а как это будет в моем случае выглядеть?
вот так:
User-agent: *
Disallow: /*-full
Мне нужно сократить роботс.тхт, т.к. писать 1000 строк не вариант! :)
Кстати, как можно проверить правильность роботс.тхт, а то вдруг закроются страницы не те?
alexandr_nv, скажем так, что дорвейщики используют разные методы уникализации, разные алгоритмы перемешивания и не всегда там бредо текст, бывает местами и логичный.
Подскажите, как разрешить доступ Яндекса к страницам site.ru/slovo и при этом запретить к страницам site.ru/slovo-full
burunduk, это за тем, чтобы делать из не уникального текста уникальный, а на форуме трудновато это найти, в какую сторону рыть вообще?
У них алгоритмы определения правильного построения предложения одинаковы или отличаются? Мне кажется что они должны быть одинаковы, иначе будут тратиться гораздо большие серверные мощности...
m0nstr0, думаю доры, которые живут месяцами 100% яндекс банит не из-за бредового текста, которым дор нашпигован, а из-за других параметров присущих данному дору.
Вроде как яндекс палит и банит бредовые тексты, в которых не соблюдается никаких основных правил русского языка или не так?
Apollon1 добавил 28.07.2009 в 15:15
Яндекс обладает знанием русского языка хотя бы на уровне ворда?
