Ну, в таком случае, дело, однозначно в контенте. Пишите Платонам - там ответы.
С вашего сайта.
Это у меня создалось такое мнение. К такому выводу я пришел, посмотрев на стуктуру карты сайта.
Насчет контента внутри, опять-таки, по моему мнению, он не очень удачно представлен, поскольку находится среди мигающих баннеров. С точки зрения яндекса - он зачастую не включает в индекс страницы, контент которых состоит из одной картинки. Таких примеров у меня масса, если интересует, то могу привести. Причем для каждых страниц уникальные титлы, заголовок страницы.
Кто знает, может к моменту, когда у мои дети пойдут в школу, я деградирую настолько, что мне будет просто необходим ваш сайт с целью помочь им в столь нелегком труде :)
Вы мне так ничего и не ответили насчет display:none, а это достаточно принципиально.
Посмотрел сайт. Переспам морды. При переходе на одну из страниц попал на порнушку. Как она связана с контентом сайта - остается только догадываться.
Карта сайта - достаточно странная структура, да и пользоваться xml "какбэ" предпочтительнее.
display:none - это ваша личная инициатива, или это в есть в коде яндекс.метрики?
А теперь давайте посмотрим правде в глаза - сайт сделан исключительно для сапы и, по большому счету, там ему и место, где он сейчас. Страницы "третьего уровня" не содержат полезной пользователю информации. Я ее узрел с большим трудом, выдрав сквозь баннеры.
В общем, вот мое резюме.
Все в порядке с вашим роботсом. Причина выпадения далеко не в нем. Анализируйте сайт сами, либо давайте урл.
Для того, чтобы получить нормальный ответ надо стараться четко формулировать вопрос. Пишите Платонам - ответ будет яснее. Бредотема - потому что причину вы не нашли, о чем и сами сказали.
Был и положительный и отрицательный опыт. Раз на раз не приходится. Сам он индексироваться не начинает, надо писать Платону. Ответ - 50 на 50 - либо "все в порядке", либо "наши алгоритмы приняли решение", потому только опытным путем.
Если вы все равно его купили, то почему бы не написать и не посмотреть на ответ? А потом, к примеру, в случае отрицательного ответа, добавить материал и не написать снова? Может быть, поможет.
Знакомьтесь:
"Здравствуйте, Евлампий Альбертович!
После анализа и классификации страниц Вашего сайта наши алгоритмы приняли
решение не включать его в поиск. Обратите внимание, что не все сайты,
известные поиску Яндекса, могут быть включены в индекс и ранжироваться высоко.
Их включение и позиция зависят от качества сайта и его контента. На решение
алгоритма может оказать влияние использование поискового спама, наличие на
сайте страниц, предназначенных для робота-индексатора, а не для чтения
пользователями, размещение уникальной информации и др. факторы."
С такой формулировкой вы еще не встречались? И что это? Бан? Он не запрещен к индексации. Не АГС, да и ГС его назвать сложно. Глюк Яндекса? Почему бы и нет. В вашем случае, можно на этом остановиться и пойти смотреть телевизор.
Да не сказал бы, что здесь полно знатоков, но, как правило, большинство из них хотя бы прочитало хелп яндекса и общее представление имеет, для того, чтобы не писать подобное:
Господа, ну что вы, право. Все верно было сказано - домен, раздел сайта, или отдельная страница может иметь свой собственный тиц.
Далеко не полез. Раздел "Игры".
"Alawar" - разработчик и издатель компьютерных игр - company.alawar.ru - 375
Онлайн-игры компании Алавар - www.alawar.ru/online - 50
"Веселая ферма 2" - флеш-вариант популярной игры - http://www.alawar.ru/onlinegames/farm-frenzy-2/online_game.php?ID=85874 - 0
собственно, вот она - чуть выше -
http://www.alawar.ru/onlinegames/farm-frenzy-2/online_game.php?ID=85874
Гугл на это ругаться не будет. Во втором случае, он просто не будет знать о существовании текстового файла в корне.
Вы сами-то понимаете, что говорите? Покажите мне сайты, "которые использую только карту сайта для индексации".
Если вы запрещаете входить роботу на сайт, то выглядит это так:
Disallow: /
Робот дойдет до вашего сайтмэпа, но страницы не попадут в индекс, поскольку они, если выражаться примерно вашими словами, "запрещены для входа".
У вас, видимо, весьма туманное представление о работе роботов. Бредотема, ей богу.