Настроить-то 404 можно
GET http://modx.com/index.html 404 Not Found
но как-то не на все возможные случаи:
GET http://modx.com/index.php 200 OK
GET http://modx.com/?shit 200 OK
GET http://drupal.org/?%D0%B4%D1%83%D0%B1%D0%BB%D0%B8 200 OK
Здравствуй мир. Какое SEO?
Создатели движков просто не думают о том, как убрать возможность самых тупых неприятностей.
Есть более тонкие случаи... их можно лечить. А пока нет удобных движков, сайты сеошников будут без движков.
Даже поисковик не может себе сделать сайтег
и на большинстве сайтов есть типичные неудобства для ПС, начинающиеся даже с серверов, а не CMS.
Итог не радостный для пользователей движков: надо платить ещё и программерам — которые за это очень любят популярных монстров.
Как будто бы писатели движков не чувствуют пустующей ниши с названием CMS удобная для поисковиков ... и возможности браузеров часто просто не используются, а можно было бы разруливать типовые проблемы (чаще только создаваемые серверной частью).
А это не является структурой сайта (если вы всё очень правильно знаете... и хотите точно указать всё, что перечислили выше, то вам к верстальщику проще, а не к дизайнеру).
Структура сайта, это скорее:
Делать то, что нужно — это не всё.
Как избавиться от всего того, что не нужно — на CMC это сложнее...
У некоторых организаций могут быть мелкие, но вкусные для журналистов неприятности... да, сразу получилась новостюга про хакеров и взлом...
Вам могут практически создавать новости ... буквально сочинив ссылки типа
whitehouse.gov/briefing-room?Free-Julian-Assange!
http://www.whitehouse.gov/?Drupal®must☻die
Если посмотреть на ответы сайтов самих CMS, то там про SEO особо не заморачивались.
Если же сайт начинающий, то возможность всех этих дублей — не хорошо, особенно если контент ограниченной уникальности (магазин), много дублирующегося — меню и пр. — а тут создатели СМС не смотрят в возможности клиента, предпочитая магические фразы типа AJAX и ЧПУ.
Вот и получается, что редактора мало, нужен ещё вебмастер — он же оптимизатор и программер.
В ссылках есть.
Просто далеко не всегда показывается пометка Найден по ссылке:
её даже можно скрывать упоминанием запроса в описании (хотя оно само не ищется), демка... это получается на стадии формирования сниппета, а не ранжирования.
GET http://www.whitehouse.gov/?%D0%B3%D0%B0%D0%B2%D0%BD%D0%BE
200 OK
В роботсе такое не очень-то закрывается, там вам не Яндекс.
Ещё продажники любят фразы типа: Мы писали это глюкло в тесном сотрудничестве с компанией Ошманофф и Прочие. И сеошников это убеждает...
Не так...
А сможете как-то сообщить поисковикам, что эти ваши старания называются семантикой?.. и всё, что вы под этим словом подразумеваете. Или вы думает, создатели ПС дизайнерские говноблоги читают?
Следующий ваш вопрос будет про HTML5... хотя про него уже наотвечали, но верующих не убавилось.
А пользователи сети... не все государственные. А сеть...
А даже на территории РФ про некоторые регионы (с большим количеством местных языков) когда-то сказалось: если бы не русский, то друг друга не понимали бы.
А бывает и большое количество диалектов, так что выручал опять русский (былой имперский). Это к вопросу о том, считать ли успехом Яндекса то, что он имеет в СНГ?.. в таком русскоязычном СНГ.
Вспоминается темка Яндекс.Вебмастер и регион сайтов — воззвание к украинцам! Когда-то она была пришпиленной.
ps Если даже известен отчет: переходы с поисковых систем, то это почти не скажет о доходах — о которых скажут сами заинтересованные пиарщики... как всегда старательно играющие какими-то цифрами, не совсем понятными публике.
Они поддерживают веру истинную!
ps Значит так не хотят вебмастеры делать сайты для людей, а не для ПС?
Если бы там были эти 5%, Волож уже сказал бы про 15, а не про «много».
А что, на графиках одно и то же? Или сравним тёплое с мягким?
Например просмотры от посетителей кто-то отличает?
Сцылку оставлял — на рассуждения журналюгов.
Вот рассуждения бывшего сотрудника Яндекса... наверное он же на серче, типа РСЯ представлял.