Можно сократить:
Disallow: /news/News_26
исключает все страницы, адрес которых начинается с
http://site.ru/news/News_26
Uhuhu, извините, но мне ваши рассуждения напоминают дискуссии о влиянии тИЦ на выдачу. Таже смесь фактов и ложных положений. Если хотите серьезно порассуждать на эту тему, то необходимо побольше почитать серьезной литературы, а то у вас люди динозавров видели и хорошо запомнили как они выглядели.
Человеческий мозг - это единое целое и если одно полушарие, по каким-то причинам не может фукционировать, его функции берет на себя другое полушарие. Если человеку отрезали ногу, то он передвигается на одной ноге. Изучение передвижения калек о чем-то нам говорит. Но изучив передвижение людей с одной правой и одной левой ногами, нельзя утверждать что знаешь все о беге двуногого человека.
Открытие асимметрии головного мозга человека - великое открытие, но деление мозга на правое и левое полушарие примитивно. Связи между отдельными центрами мозга настолько сложны и многообразны, что, можно сказать, наука только начинает изучать, то как работает человеческий мозг.
А вообще, мне казалось, что этот форум о чем-то другом?
Это похожие страницы, с точки зрения Гугла. Чем они похожи у меня лучше не спрашивайте. Тяжело, видно, Гуглу с русским языком.
Это прежде всего плохо для вас. Взгляните, например, на календарь на этом форуме. Сколько совершенно ненужных страниц обнаружит робот, если открыть этот раздел? Вы хотите чтобы вместо своевременной индексации самых важных страниц вашего сайта, робот погрузился в глубь веков?
В алгоритме поисковика, конечно, есть защита против таких ловушек для роботов, но на качественную индексацию такого ресурса надеяться не приходится. А если модератор наткнется на большое количество мусора в базе, то, как минимум, удалит разом все страницы сайта из индекса.
Закрытые ссылки на форуме помогают аккумулировать PR внутри сайта. Вдруг кто-нибудь поставит пиаристую ссылку на интересную тему вашего форума? И, по-моему, создают более доброжелательную атмосферу на форуме. Пользователи могут ставить ссылки без боязни того, что их обвинят в спамерстве. Ну, и модераторам проще, нет, например, необходимости вводить ограничения на подписи.
Я, лично, еще бы добавил следующее:
4. Облегчить шаблоны. Оставить только необходимое для данного конкретного форума, убрав излишества.
5. Ссылки, создаваемые посетителями форума, снабдить конструкцией <noindex><a ... rel="nofollow"> ... </a></noindex>
Разбить на файлы в соответствии с логической структурой. В данном случае на три блока. Вставлять в 1.html три блока, в 2.html один блок и т. д.
lagif, у левшей мозг немного по-другому работает. Это доказанный научный факт. Левши лучше генерируют новые идеи.
В спорте хорошо заметно отличие. Вы думаете в боксе тактика боя левши с левшой таже самая что и у правши с правшой? А фехтование - вообще мир левшей.
VERONIQUE, оптимизация тут ни при чем. Это не шовинизм, а сексизм. Женской национальности в природе не существует. :)
А вот, статистика не в нашу пользу. Среднестатистическая женщина более образована, да и IQ у нее выше. Я уж не говорю о продолжительности жизни...
Может среднестатистическому мужику стоит поменьше пить и побольше читать. :)
Возвращаясь к оптимизации, нет никаких оснований полагать, что это не женское дело.
Что бы делал я в таком случае?
1. Предупредил бы владельца сайта о том, что такое использование контента моего сайта запрещено.
2. Если бы меня проигнорировали или послали, то использовал бы сайт халявщика в своих целях. Посудите сами, вам практически дают неограниченные возможности по размещению кода на страницах чужого сайта. Халявщик на самом деле сильно рискует, так как может и бан сайта заработать.
Как это сделать?
Как правило, халявщики запрашивают вашу страницу прямо с сервера, на котором расположен сайт-паразит, т. е. легко фильтруются по IP. О технической реализации смотри клоакинг.
Если даже халявщика невозможно точно пределить по IP, реферу и проч. То можно использовать особенность парсера.
Что же делает парсер? Он последовательно сканирует код вашей страницы в поисках точки начала и конца необходимого куска кода. Далее парсер вырезает кусок, и он вставляется в страницу халявщика.
Точка (извините за возможно неудачный термин) - это уникальное для этой страницы сочетание тегов и/или текста.
Посмотре на код своей страницы. Делайте непринципиальные изменения кода на вашей странице и смотрите страницу халявщика. Уверяю, алогоритм парсера быстро станет вам понятен.
Как мы можем использовать это знание, например, вставить дополнительный блок, которого не будет на вашей странице?
Пример кода вашей страницы:
<!-- точка_начала дополнительный_блок --> основной_блок точка_конца
У халявщика на странице получится:
дополнительный_блок --> основной_блок
Комментарий превращается в исполнимый код.
У ваших страниц разный цвет фона? Что у него там в CSS?
Лишние закрывающие теги браузер игнорирует, поэтому можно сделать так, что в браузере халявщик не увидит никаких изменений.
http://www.biblioteka.net.ru/backlink.php
В заголовке опечатка:
"Скрипт определения наличия проиндексированной ссыли на ваш сайт"
URL Вашего сайта: (без http://, с www и без него)
Было бы не плохо автоматически добавлять * (site.ru*).
URL сайта с ссылкой: (без http://www.)
www не подставляет.
Наверное, лучше написать также как вверху.
