я знаю контору, которая за 38 дает площядку и домен на 2 года.
площядка канешна не ахти, но тем не менее...
а какую именно софтину для этого можно поставить?
помница раньше naviscope перехватывал http заголовки бара, но видать с обновлением баровой версии он не то-что перестал перехватывать, он даже их не пропускает.
как не урезаны? урезаны тоже.
и небыло там на момент индексации пусто. он именно обрубил на полслове все проиндексеные страницы...
тоже 2...
в чем трабл?
а ты поворочай 3-мя миллиардами страниц без глюков :)
я бы на твоем месте слепил доры с уникальным контентом и хорошим крослинком. для того, чтоб слить траф, и не потерять ПР.
при использовании изложеного мною варианта открываются большие горизонты. сайт, как таковой можно ваще избавить от статических хтмл-ов, и все генерить из скрипта.
изложу простой пример:
тебе ничего не мешает, помимо запрошеного документа узнать рефа. к примеру реф такой:
http://www.google.com/search?hl=en&ie=UTF-8&oe=UTF-8&q=jopa&btnG=Google+Search
прямо в скрипте разбираешь эту колбасу, выделяешь q=jopa, откуда видно что человек искали именно jopa. делаешь выводы, и прямо из скрипта, по шаблону генеришь специально для него дор, заточеный под искомое слово. т.е. выкладываешь в шаблон ралевантный текст. разбавляешь контент конкретно этим ключевым словом, вбиваешь его в метатэги итд... сам понимаешь что.
при конце у тебя получится следющее: какой бы документ сёрфер не запросил с твоего сервака, ты, разобрав его реф выдаешь ему именно то, что он желает увидеть.
соответственно, если реф скрипт не смог разобрать, выдай ему какую нить стандартную пагу...
в общем включай мозги, и работай, тут есть над чем подумать ;)
удачи.
проснулся... тут на всех бордах одно и то-же говорят, бардак уже месяц, а он только щя опомнился. :):):)
тут самое главное чтоб апач твой не отдал код ошибки боту.
юзаешь mod_rewrite, который все обращения к твоему сайту будет перенаправлять на скрипт, который прост до безобразия.
т.е. сам скрипт должен проверить наличие запрошеного файла, и в случае его отсутствия ты можешь выдать любой другой документ. одним словом, наличие файла проверяет не апач, а твой скрипт.
вот .htaccess:
DirectoryIndex cgi-bin/go.pl?index.html
RewriteEngine On
Options +FollowSymlinks
RewriteBase /
RewriteRule ^(.*?)/(.*)$ $1cgi-bin/go.pl?$2
вот скрипт go.pl, что будет отдавать документы:
#!/usr/bin/perl $filename=$ENV{"QUERY_STRING"}; open(FILE,"../$filename") or open(FILE,"../error.html"); undef $/; $_=<FILE>; print "Content-type:text/html\n\n$_";
mod-rewite-ом любой запрос типа your_domain.com/your_page.html приводится к виду your_domain.com/cgi-bin/go.pl?your_page.html
соответственно скрипт в строке $filename=$ENV{"QUERY_STRING"}; получит строку с именем запрошеного файла your_page.html. его он и пытается открыть в строке
open(FILE,"../$filename") or open(FILE,"../error.html");
в таком варианте апач даже догадываться не будет о том, что произошло обращение к несуществующему документу.
отслкживают, если засветишься...
но ведь можно ошибку перехватить, до того как о ней узнает бот ;)
эх, молодежь...
http://www.google.com/addurl.html
