Как? Как он может сам по себе заходить??? Первый раз сталкиваюсь.
Может кто-то другой параллельно с Вами добавляет его в аддурл? Ну не разу не встречал его на сайтах просто так! Только после формы...
Просмотрел логи ещё 2-х сайтов за 3 месяца. Заходил всего один раз. В самом начале. После формы.
З.ы. Так и думал, что скорее всего что-то не то с хостингом...
Никто из них не врёт. Учитесь читать между строк, и не замечать некоторые ошибки (погрешности) в написании постов. + не писать бессмысленные ответы.
У Вас есть свои сайты? Проведите следственный эксперимент - просмотрите логи сайтов, посмотрите когда к вам заходил робот D. Добавьте ещё раз свои сайты через аддурл Яндекса. Посмотрите снова логи.
Artlight, меня вот смущает пока одно...
Вы пишите, что
Но потом судя по тому, что вы пишите в посте 4 - на одном из сайтов всё же всё заработало нормально...
Как я уже написал - у меня такая проблема тоже возникла вот совсем недавно. (но только с одним сайтом) - но на данный момент вопрос снят, робот таки добрался до морды.
Смущает то, что действительно непонятно - в чём дело. И то, что у других форумчан таких проблем не было... Получается это нам двоим пока так свезло?
уфф... ещё раз:
ну не ходит он просто так сам. ну никак. Только после формы.
Поправте меня пожалуйста если я не прав, но разве может этот робот заходить "самостоятельно"?
Смысл был это писать? Зачем делать пересказ того, что сказал ТС?
Для Вас повторю ещё раз. Была такая же ситуация как у ТС. Робот D тыкался в роботс два раза подряд и всё. Длилось такое примерно дней 5. На данный момент всё работает стабильно. Секунда на роботс и сразу к морде.
на самом деле Вы не правы. Я привёл описание из http://webmaster.yandex.ru/faq.xml?id=502499#user-agent , где чётко написано:
То, что вы называете "дятлом" - это робот "простукиватель" Яндекс.Каталога, Директа, Закладок, Новостей. Собственно о нём вы можете прочитать перейдя по ссылке указаной выше. На всякий случай приведу цитату:
Собственно по этому Вы вероятно не совсем поняли о чём мы тут говорили.
Логика немного не та у Вас - он сначала проверяет роботс, а потом уже к морде идёт...
Вы наверно не очень внимательно прочли первый пост:
ключевые слова "только robots.txt"
У меня всего на одном сайте подобная ситуация... Касается роботса два раза, а морду не трогает.
ДОБАВЛЕНО: сейчас проверил ещё раз - всё нормально стало работать!
Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL»
Artlight, такая же ситуация на одном сайте
да уж.
пациент.
/ru/forum/comment/2113855
/ru/forum/141396
Оценка: 1036.5 баллов
Фактор D: Silver
Robots.txt
вообще-то есть в этом разделе ссылочка на FAQ для новичков - /ru/forum/87037
а там есть вот такая ссылочка - /ru/forum/86666
смысл повторять вопрос?
это тогда уже не глупые вопросы от новичков, а вопросы от глупых новичков - которые даже FAQ для начинающих не хотят прочитать...
как правильно сказал ув. господин bondarev.pp.ru в первой части:
/ru/forum/comment/1813236
p.s.
