Скорее так
Наблюдения за навигационными цепочками в Яндексе, но не читайте там соседние страницы.
Это значит контент есть. Даже если хотя бы тайтл есть.
А если нет, то
Мета-дескрипшн за текст не хиляет.
Но не следует верить в объяснение, которое откроется по клику... там либо тупость, либо откровенная деза (да, у бота щукина такой уж олгоритм).
Им легче прикрывать свою задницу величественными мифами, чем переписывать залежи софта прошлого века.
Вопрос к админам и программерам: Где кончается движок и начинается сервак?
Пример: Disallow: /?
с чего бы такая строчка?
Пробуем
http://www.yandex.ru//?гавнопоиск
http://www.yandex.ru//?Гавно☻Поиск
200
<noindex>CODE12345</noindex>
Но учтите, что, если кто будет искать код товара, то не найдёт. Поэтому, лучше изменить вёрстку так, чтобы CODE12345 остался открытым, но был далеко (в длине текста) от любого слов запроса... или хотя бы в отдельном блоке — выше в HTML-коде (на пару пассажей), чем любое из слов запроса.
А в делурл, кроме дубля, cможете попробовать добавить и домен/ тоже... и всё, про что возникают сомнения. Он и ответит.
Зачем в http://www.yandex.ru/robots.txt
Disallow: /?
А мне когда-то пришлось дописать и
Disallow: /robots # чтобы G robots.txt не индексил.
А бывают фанаты index.html ... и ничего с ними не поделать.
Ну вот и повод в роботс дописать :)
Но вот таких ответов быть не должно:
http://www.bdbd.ru/index.html
HTTP/1.1 200 OK
И закрывайте всё лишнее, что даёт 200, а то всякое возможно.
http://help.yandex.ru/webmaster/?id=1079306#1079313
Сервак не должен отвечать 200 по лишнему урлу.
А то, что кэш MIME-тип: text/xml
такое раньше кто-нибудь видел?
Если text/html
то браузер не обязан сообщать об ошибке.
А вот другой кэш с text/html
На тестовых страничках попадается нечто типа: одно слово тайтла не ищется, хотя в кэше давно есть.
Вроде чуть выше разобрались.
И почему при этом всём он виден в Гугле по запросу моцарт?
Даже не про этот... то же самое возможно и без ссылок/сеток. Но Cell не верит.
Ну это на момент размещения могло отсутствовать. А за то, что оно появилось — ответственны и ПС тоже.
Интереснее с wolfgang-mozart.ru
слегка похоже на то, что ТС написал.
Есть в ЯК
Веб-архив с 2007 года.
Ну контент не уник, наверное почти весь из цитат.
Ну чего, переспам морды?
Наиболее часто встречающиеся леммы
МОЦАРТ 31
Кроме как считать Яндекс ничего не умеет?