Так ведь сами настраивать будут. И потом, с тайм аутом 1 сек - полтора часа проверяться будет. Вполне нормально. Да и те кого большой сайт, наверно более продвинутые тарифные планы, так что там можно указать и 10 раз в секунду.
Всё равно результаты различаются. А вы не пробовали указывать юзер-агент браузера?
Ладно я сейчас уезжаю, пока отложим этот вопрос. Да и не понимаю в чём проблема найти другой сайт на неткате. Наунет вообще в июне блокировал бота Яндекса из-за превышения нагрузки - тогда куча сайтов вылетело. После чего в роботсе было прописано: Crawl-delay: 3
Но я так понял, ваша программа не читает его от этого и проблема возникла. Было очень много обращений, вот пример:
В среднем там получается 4-е раза в секунду. Настройте, чтобы можно было настроить тайм-аут обращения к сайту и что сканировать не надо. И если проблема повторится, тогда уже об логах и урле поговорим, а как сейчас это может случиться с любым сайтом на виртуальном хостинге. И ещё про Clean-param не забудьте.
Ваша прога её так же проигнорировала.
Так у вас файл или метатег был?
Неприятности и без склейки могут быть. Вы же врядли переделываете все страницы сайта, могут склеиться отдельные страницы - и в выдаче выдаваться не ваша. Или аффилат фильтр.
Нормально захожу. Может хостер какие-то IP заблокировал.
В панеле управления Яндекса - смотреть пункт быстрые ссылки. Там всё написано.
Похоже выдача у мейла совпадает с геозависимыми запросами по Москве(смотрел из москвы). И разнится, если запрос геонезависимый, но не всегда бывает, что и совпадает.
Так склейка ещё не произошла. Удалить файл подтверждения или метатег, что у вас там. Прописать хост. Запросить подтверждение заново - добавить файл/метатег на сайт.
А в чём сложности? Вроде так: ftp://swim7.narod.ru:ваш_пароль@ftp.narod.ru Кидаете туда файлик.
Дороговато при таком обороте. Из него вычесть затраты, зарплату, аренду, налоги и т.п. И сколько останется? 5-ь лет окупаемости? Можно поднять всё с нуля дешевле. Собственно всё это и так есть у крупных компаний, если что и интересно, то это клиентская база, наработки и проги, сеть собственных сателлитов.
