теоретики хехе... :)
если отдавать 404код и запретить в роботсе - то этих страниц будет ещё больше в индексе и они будут учавствовать в серпе с тайтлами (тайтлы в серпе будут состоять из анкоров ссылок на эти самые страницы с 404, запрещённые роботсом)... :)
всё это проверено на ПРАКТИКЕ... :) кто не верит - сам проверит... :)
чтобы избавится от таких страниц нужно или как уже сказали в ВМТ отправлять запросы или запрещать роботсом и отдавать 301 допустим на морду с них... :)
зря смеётесь...
если на страницу стоят ссылки, она запрещена роботсом и сервер по её адресу отдаёт 404, то урл отлично попадает в серп и прекрасно ранжируется на основе только ссылочного...
кстати пролетая много фильтров... :)
баг пока до конца не исправили, так-что некоторые им успешно пользуются... :)
Balabass добавил 06.01.2011 в 01:51
а... забыл дописать, править сей баг лучше 301 или если всётаки нужно закрывать роботсом - то отдавать 200 а не 404...
хотя по прошествии Н-нного кол-ва времени урлы и сами вылетят... :)
гугл переносит ссылочное через редирект не сразу, а по мере обхода ссылок, поставленных на ваш сайт...
Вот тут, если нужен буржуй-траф...
да... 302 редирект...
entropy, если про CMS только, то бери пример с движка MediaWiki она наиболее продумана изначально для хорошего индексирования, грамотной перелинковки и т.д... :)
самоуверенность это хорошо... :)
но только то, что ты писал какуюто там CMS ничего не значит... :)
любой опытный сеошник в силах нанять десятки таких разработчиков для своих нужд... :)
так-что дерзай сам... :)
пожалуйста http://www.google.com/search?hl=en&q=related:http%3a%2f%2fwww%2egoogle%2ecom%2frobots%2etxt :)
новый документ+толстые ссылки - вот тебе и результат... :)
пробуй делать на страницах, которые уже в индексе давно были - тогда дольше держатся будет... :) а вообще щас и абсолютно новые домены с такими ссылками в топ только в путь пускает, правда на 1-2 дня... :) что тебе мешает каждый день новые домены регать и менять свои жирные ссылки на них? если темы жирные всё окупится наура... :)
снимайте ссылки, добавте сайт в WMT и отпишите в гугл, мол почему мой сайт перестал искаться...