Artisan

Есть такая дырочка, DNS poisoning называется, кстати по IP Вашего сайта без явного запроса Вашего сайта Ваш сайт не выдается, так что у Вас не в DNS дело похоже, ...

Возможно Ваш сайт выдается сервером по умолчанию если на этом IP адресе нет того сайта который запрашивается а где то глючный DNS сервер выдает IP адрес Вашего сайта в ответ не запросы о тех сайтах которые там были раньше и это может продолжаться иногда очень долго, ...

Если в документе shtml есть вставка динамики то сервер может не выдавать размер документа то есть отличие от статичного html все таки есть и возможно будут отличия при обработке If-Modified-Since но оба этих отличия для индексации обычно не важны.

Если под HTML подразумевается настоящая статика то можно учесть то что написано выше но решать Вам придется все равно самому потому что Вы лучше знаете все особенности задачи а если под HTML подразумевается только расширение имен файлов то можно сделать так чтобы файлы с расширениями html / shtml обрабатывались сервером одинаково что по умолчанию не делают из экономии потому что обработка shtml требует больше машинного времени чем просто выдача статичных файлов.

Это зависит от того сколько там файлов и наибольшего времени выполнения CGI программ которое разрешено на хостинге, если успеет скопироваться то можно и простейший perl скрипт использовать типа того который ниже причем обратите внимание на одиночные обратные кавычки вокруг команды.

#!/usr/bin/perl

print "Content-Type: text/plain\n\n";

print `/bin/cp -r /one/* /two/`;

cp -r /files/* /pub/

Идея про то чтобы платить за размещение информеров как раз хорошая но похоже что начальство KM.RU слишком торопит программистов от чего качество улучшиться не может, ...

А если поточнее? IspBSD, UML, Virtuozzo, или еще что? Если Linux то какие версии? Через какие сети подключено? Если можно пример сайта на этом хостинге?

Сразу ясно что человек понимает задачу, ...

Весь этот спор не имеет смысла потому что очень многое зависит от того для чего именно нужна поисковая система.

Можно TARGET="_blank" сделать чтобы народ про Ваш сайт не забывал, альтруизм это конечно хорошо но для каталога лучше открывать чужие сайты в новом окне, ...