Про "скрытый" ЯК здесь почитайте /ru/forum/127970.
Поиском попользуйтесь по форуму, наверняка найдёте много интересного по этому вопросу.
В качестве фишки можно предложить статистику посещений роботов поисковых систем.
Это выгодно будет отличать Ваш анализатор от многих других. Ну и над графикой ещё работать и работать.
Не Платону пишите, а в robots.txt пропишите host какой Вам нужен.
Те ссылки, которые Вы заключили в <noindex>. Если внимательно посмотрите, там ещё есть "Список ссылок, запрещенных к индексации Google".По сабжу - Site - auditor и Semonitor.
Прошёл месяц со дня прогона сайта ТС. Можно подвести некоторые итоги. Бэков добавилось 195, ТИЦ подрос на 60. Для ненулевого сайта (несколько прогонов по разным базам, 400/130) показатели работы ТС близки к отличным. С учётом того, что не было проблем во время прогона - твёрдая пятёрка.
Проверено эмпирическим путём - нет. Позиции сайта нисколько не изменяются.
Хотя ситуация, конечно, неприятная. Впрочем, многие сознательно идут на нарушения и бан не является в этом случае неожиданностью.
Colocall.net. Технических проблем - нет. Поддержка - супер, работает круглосуточно. Был случай - при переходе на версию php5.2 у меня некорректно стали работать некоторые скрипты. По моему звонку они полночи занимались, а утром сами позвонили - интересовались, всё ли ОК! На Новый год поздравили :) Мелочь, а приятно.
HostCMS - пользуюсь free-версией (для сайта в 300 страниц вполне удовлетворяет), достаточно функциональна.
Если у Вас всё заточено без www, следует написать:
User-Agent: Yandex
Disallow:
Host: site.ru
Лог файлы предоставляет хостер. Обычно в папке log имеются файлы access.log и error.log
Access.log - это то, что Вам нужно. Желательно иметь какой-либо анализатор логов.
Прошу прощения, не вчитался до конца. Не знаю, предоставляется ли доступ к лог-файлам на бесплатном хостинге.
