Файл robots.txt действительно отсутствует. Его нужно создать? И в какой каталог поместить? Там нужно что либо писать или он должен быть пустым?
По поводу других поисковых систем - http://www.rambler.ru/srch?sort=0&oe=1251&words=%CC%E5%E4%E8%F6%E8%ED%F1%EA%E8%E9+%F4%EE%F0%F3%EC&filter=http://medicinform.ru
medicinform.ru (всего 9863)
Это в Рамблере.
Google тоже хорошо индексирует, GoogleBot вообще почти постоянно на форуме сидит. 😂
А вот яндекс... Ну вот, например:
http://www.yandex.ru/yandsearch?stype=www&nl=1&text=%CC%E5%E4%E8%F6%E8%ED%F1%EA%E8%E9+%F4%EE%F0%F3%EC
Еще с сайта 532
Если Вы нажмёте на "Еще с сайта", то увидите там вот это: http://www.yandex.ru/yandsearch?text=%CC%E5%E4%E8%F6%E8%ED%F1%EA%E8%E9%20%F4%EE%F0%F3%EC&pag=u&surl=medicinform.ru&
Там вообще непонятно что, сразу видно, что он его плохо кушает, очень плохо.
Вот проверил одним сервисом ответ от сервера:
Заголовок:
384
HTTP/1.1 200 OK
Date: Thu, 24 May 2007 10:25:12 GMT
Server: Apache/1.3.37 (Unix) mod_ssl/2.8.28 OpenSSL/0.9.7e PHP/4.4.6 FrontPage/5.0.2.2510
X-Powered-By: PHP/4.4.6
Set-Cookie: CookieIp=81.222.134.42; expires=Wed, 09 May 2035 08:58:09 GMT
Set-Cookie: session_id=26e6a514a461bfba97ef41ded99b7005; path=/
Connection: close
Transfer-Encoding: chunked
Content-Type: text/htm
Есть ли тут что-то подозрительное?