Как устроена морда?

— Куда мне отсюда идти?

— А куда ты хочешь попасть?

— А мне все равно, только бы попасть куда-нибудь.

— Тогда все равно куда идти.

Куда-нибудь ты обязательно попадешь.

Послушайте, ну, вот еще раз на примере Российской газеты. На морде анонсы статей. Это рерайт статей. Там предложения могут полностью совпадать, но могут и не совпадать. Если это хоть чуть-чуть рерайт, то по сути, это другой материал, чем на страницах вглубине сайта. Значит, морда за конкретный день - это полноценная страница для поисковика. Вот он ее проиндексировал сегодня. А завтра он эту же страницу уже не найдет. Т.е. она ушла в так называемый "глубинный интернет", как его называет Ашманов. Он не виден поисковику. Вот, где вчерашняя морда Российской газеты? Нету. Так получается.

Или поисковик посчитает морду просто наиболее обновляемой страницей сайта?

Ничего не понял. У новостных сайтов морда выдается, наверное, разве что по названию или по запросу "новости"... по остальным - релевантный внутряк.

Вот возьмем пример. Он немного притянут за уши, но иллюстрирует тему. Вот на сайте Российской газеты сейчас болтается на морде такой анонсик: "Базовые тарифы ОСАГО с 12 апреля повысятся минимум на 40 процентов, страховые компании вправе увеличить тарифы еще на 20 процентов. Кроме того, изменится методика расчета стоимости автозапчастей: выплаты по ним увеличатся в среднем на 20-25 процентов. Такое решение принял совет директоров Центрального банка абсолютно релевантного запроса". Я его копирнул в буфер обмена, зашел по ссылочке на саму статью, проверил, что конкретно такого текста там нет. Поиском проверил. Иду в Яндекс. Из буфера обмена все вставляю.

Российской газеты на первой странице в выдаче нет. А дальше я не полез.

Что мы видим. Сайт содержит информацию? Содержит. По этому запросу она была бы абсолютно релевантной? Была бы.

Как-то так мыслю.

---------- Добавлено 21.03.2015 в 01:01 ----------

Давайте переформулирую вопрос: не будет ли лучше морду каждого дня делать на отдельной странице с ЧПУ, а type in трафик с основной странице редиректить на сегодняшнюю морду?

Поставим эксперимент. Сегодня на сайте NYTimes на лучшем (самом левом верхнем) месте висит вот такой анонс: Despite Prime Minister Benjamin Netanyahu’s election victory, he is still out of the good graces of the Obama administration, which has had to reassess its policy toward Israel.

При клике по анонсу мы в статье не обнаружим абсолютно такого текста. Т.е. это был рерайт.

Далее. Идем в гугль. В топе стоит не морда NYTimes, а http://international.nytimes.com/ с прямым вхождением всей этой фразы. Ну, хотя бы само издание. Далее - на второй позиции - www.globoble.com с прямым вхождением (ссылка на внутряк).

На третьей позиции ben.koski.us с прямым вхождением всей фразы (ссылка на внутряк).

Вот примерно так. Завтра - послезавтра мы посмотрим. Сохранится ли NYTimes в топе или нет. А эти ребята текстик сохранят. И я больше чем уверен, что они на нем заработают. Потому что текстик будет - по сути - уникальный, текстик будет уже ихний, Нью-Йорк Таймсу не нужен как мусор.

Вот примерно так. А с учетом скорости обновления сайта - сколько же текста NY Times выбрасывает в окошко. И позиций в поисковиках.

Ничего не понял.

Нету. Так получается. И не нужна она завтра. Бо сайт газеты делается не для того, чтобы количество страниц с анонсами увеличивать, а чтобы люди статьи читали. Свежие.

В реальной жизни газеты тоже, обычно, не хранят.

Видите ли, я смотрю на сайты крутых новостников, а в голове-то держу свой, личный проект. И если уж я написал текст, так мне его жалко выкидывать. Вот к чему я клоню. Пусть они текстом кидаются, а мне - лично - жалко.

А, может быть, для морды есть какие-то рекомендации по взаимодействию с роботом?

Я сейчас смотрю robots.txt разных сайтов, ничего пока не понял. Или, может быть, для робота время изменения страницы проставляется какое-нибудь хитрое, чтобы робот лишний раз на морду не смотрел.

В общем, где копать, подскажите, пожалуйста.

Ну и? Дальше что?

Копайте там, где земля. Где асфальт - не копайте. Где бетон - совсем не копайте!

Тс либо нашел новый способ получения трафика либо мается херней от нечего делать.

Я не совсем понял зачем упоминаемые сайты делают рерайт собственных новостей? Избавляются от дублей?

обычно же выводится анонс новости или банально первые несколько строк