На текарт-промо пишут, что у апорта есть лимит для каждого сайта. Зависит от рассчитываемой им же цитируемости. То есть, теоретически лимит может быть равным нулю
Роботс тут не при чем. Он помогает управлять индексацией путем запретов определенных действий. В ускорении деятельности бота, соответственно, он может помочь, только защитив его, беднягу, от лишней работы. Позанимайтесь контентом, а тем временем и бот придет. И если увидит, что странички обновляются, может быстро возлюбить сайт
А вот с этим можете доиграться:
Данный роботс, во-первых, не валиден. То есть, далеко не факт, что его поймут роботы - он начинается с непонятной никому, кроме Яндекса, директивы хост. Во-вторых, если роботы его таки поймут, будет полное счастье - строка Disallow: / запрещает индексацию всего сайта. Судя по симптомам, Вам такое не надо. В-третьих, директиву хост нужно указывать именно для Яндекса. В-четвертых, желательно поставить хотя бы одну запрещающую что-нибудь индексировать строку. То есть, файл должен выглядеть примерно так:
User-agent: *
Disallow: /папка/
User-agent: Yandex
Host: site.ru
Тогда сделайте внятный контент, грамотно залинкуйте его внутри сайта, а потом начинайте ставить ссылки с ключевиками. Пока будете оптимизировать сам сайт, прояснится ситуация с белыми каталогами - в разных ветках сейчас люди предполагают, что на них наложен некий фильтр. То есть, по ходу оптимизации сайта читайте форум - особых секретов никто не раскроет, но многое станет понятно. Заодно определитесь, где и как ставить линки. По поводу возможных фильтров на "беляки" активнее всего лопочут в разделе "Яндекс".
Если "беляки" вернутся, то по низкочастотному запросу может и их хватить.
Полностью поддерживаю предыдущего оратора. После того, как повесил хост ввв..., произошла интересная канитель. Из индекса вылетела туча страниц на трех алиасах, траф соответственно, сократился в три раза. Самое смешное - в Яке сайт без дабиков, а переклеить хотел на с дабиками. Склеил, но на без дабиков... Пока от греха подальше поставил эту замечательную директиву хост на без дабиков, после редизайна и изменения основного домена буду баловаться 301-м редиректом. Потому как дохостодирективился уже.
Вообще, мое мнение - идти на поводу у одного поисковика глупо. Даже если он называется Яндекс. Лучше делать что-то, что понимают все ПС. 301 они понимают
А моя морда потерялась:) Самое паскудное, что никто ее сознательно не продвигал:)
Два раза наблюдал такое в яке. К процессу отношения не имел, но с учетом ментальности хозяев сайтов, могу с 99,99%-й вероятностью предположить, что меняли бесплатно:)
Дык не проверите, не узнаете...
Ну, это уже, наверное, от ментальности зависит. Нормальный человек не будет впаривать какую-то дурню, а за маленькие деньги просто откажется от работы...
Наверное, таки да. Судя по моим наблюдениям, в искомой директории никто особо и не работает. Я виц с пром качаю, а у остальных вообще никакой активости не вижу. Видимо, такая одаренная категория:)
