Вы можете на этом сайте менять текст на первой странице и title?
Для одного запроса вам этого хватит.
Только прикиньте, много ли трафика даст один запрос, особенно если его частота в Рамблере всего 90 в месяц. Думаю - не более 5 заходов в день с учетом Яндекса.
У Вас есть бюджет на рекламу в интернете?
как только выйден новая версия каждого бота, этот фильтр будет бессилен. Не надо туда включать номера версий. Например, для Яндекса достаточно
Yandex/
... которые продвигают конкурентов.
Так будет вернее, действительно, по нулям:
http://www.yandex.ru/yandsearch?text=rhost%3D%22ru.land.*%22
http://www.yandex.ru/yandsearch?text=rhost%3D%22net.pisem.*%22
Тут кое-что писали на днях:
http://forum.yandex.ru/yandex/improve.xhtml?message_id=1351201
Прошу прощения за много букв, я процитировал статью из мануала, прилагаемого к программе. Это был такой намек.
Шаг №1 - Создание проекта.
Откройте меню "Проект" - "Новый проект", введите название и нажмите кнопку создать.
Шаг №2 - Редактирование проекта.
Откройте меню "Проект" - "Редактировать", перед Вами откроется следующее меню.
Здесь Вы должны поместить подробную информацию о сайте, согласно названиям полей (закладка №1), а также свою контактную информацию (закладка №2). Вся эта информация будет использоваться для заполнения аналогичных полей в каталоге. Также существуют дополнительные поля (закладка №3), которые Вы можете использовать по своему усмотрению (нестандартные данные или альтернативное описание какого-либо другого поля ...), для чего Вы должны ввести сначала идентификатор этого поля, а потом значение.
например. (url Pad файла, url - картинки, размер и.т.д) необходимые для регистрации, например в каталогах софта или других информационных ресурсах Интернета, программа ведь универсальна.
Обратите внимание, что бы в дальнейшем программа могла использовать поле, необходимо его отметить галочкой.
Шаг №3 - Открытие базы данных.
Создайте или откройте существующую в поставке программы базу навигационных и поисковых систем, выбрав в меню программы "Базы данных" -"Открыть" и выберите какую-либо базу.
Шаг №4 - Работа.
Далее, нажимая кнопку "Вперед URL"(или клавишу F1) вы будете переходить на следующие каталоги/поисковые системы для регистрации.
При открытии страницы с регистрацией Вам достаточно нажать кнопку "Заполнить"(или клавишу F2) и все данные будут заполнены, вам останется только при необходимости подредактировать их, после чего нажать кнопку добавления на самой странице регистрации и подождать успешного завершения.
Или же просто, пользуясь как обычным Браузером, зайдя на любую регистрационную форму вы сможете ее заполнить одним нажатием на кнопку "Заполнить"(или клавишу F2).
Пример.
Как видите, программа одним нажатием кнопки "Заполнить"
Создала напротив каждого поля выпадающий список вероятных значений.
Заполнила все поля Автоматически.
Также заполнила поле "Раздел" из возможных значений указанных при создании проекта в поле "Список категорий, в которых вы хотите регистрировать ваш сайт (через пробел)"
Даже если программа делает ошибку в подстановке вы можете легко выбрать из выпадающего списка нужной вариант подстановки для поля. Более того, программа постоянно учиться, чем больше посещений, тем меньше вероятность ошибки на абсолютно новых сайтах.
После повторного нажатия на кнопку "Вперед URL"(или клавишу F1), вы увидите следующее меню, где вам необходимо оценить регистрацию сайта.
"Удалить" - вы можете удалить из базы данных сайт.
"Переместить" - вы можете переместить в другую базу данных сайт, если он не подходит вам для данного типа регистрации.
Например, если данный сайт каталог софта, а вы не регистрируете программу (просто переместите его и он будет у вас в другой базе, а из текущей будет удален, а потом вы им воспользуетесь, когда будет в этом необходимость).
"Плохо" - сайт не подходящий по тематике вам, в котором вы не смогли зарегистрироваться.
"Позже" - сайт в котором вы не хотите в данный момент регистрироваться.
"Успешно" - сайты где вы успешно провели регистрацию.
Изменить статус регистрации вашего сайта в, определённом каталоге/поисковой системе, "Успешно","Плохо", "Позже" вы можете в меню "Проект" - "Редактировать" - закладка Отчет
можно нажимая кнопки , расположенные у одноимённых списков.
Программа помнит все сайты (по доменному имени) в которых вы регистрируйте ваш проект и даже если вы откроете совершенно новую базу данных, программа отсеет, те сайты в которых вы уже зарегистрированы.
Лучше StackRambler. И добавить WebAlta !
Почему "или"? "И". Ведь если запустить 3 тысячи запросов в минуту, а потом отдыхать сутки, сайт ляжет. Вам там наверное проще посчитать первую цифру?
по 7 тысяч в сутки, это примерно 1 запрос в 12 секунд. Но полностью проиндексировать такой сайт за 2 недели - это просто подарок, вероятно, это - лишнее.
