В том то и дело, что уже никак:
Первое - У нормальных сайтов все в Zeal чики-чики ;). Минимум 200 правильных ссылок ;);
и второе - народ сам ведется на их предложение, на сайты они заходют со своих адресов и на LookSmart не наехать никак ;). Дураков хватает. Прямая аналогия с переводом Google - добровольцы бесплатно поработали на корпорацию.
З.Ы. С Открытым каталогом не путайте, там все полностью и бесплатно доступно.
Виктор, ты бы про пенсию Чейни ссылку бросил бы лучше ;)...
Хмм... по продвинутым сайтам разница будет ;).
Только никто не будет там использовать настоящие алгоритмы выдачи - зачем их раскрывать-то? (думал сами догадаетесь, ан нет - пришлось сказать...).
Спасибо, побаловался с вами тут - и увидел, что он всю мою динамику скушал... Вот радость-то ;), теперь в мае-июне 3 сайта с 20 страниц вырастут до 2000 каждый ;).
про долго грузится - упустил (сам перешел с isdn на dsl), но оно от баннеров ;)...
Или домен сменишь ;)...
Странно как-то - "горы" прочитал, а ничего не понял... Найди свою нишу, окружи себя тематическими сайтами, в конце концов сделай их сам! Только не ломись в стены и не жлобись ;). Порой достаточно 10-12 ссылок с качественных ресурсов (влючая Открытый каталог), а иногда и 1-2 (если ресурс хороший) - чтобы тебя заметили ;).
Для коммерческого сайта жизнь начинается с 1000 юников в день...
В том и проблема ;), grub - не есть "crawler" - это просто проверка и поиск реальных адресов - расчистка завалов ;) - за счет юзеров.
А так пробовал: "site:www.domain.com -neverseenlettercombination" ;)?
Взаимосвязь в базе. На свежеобновленных (в Zeal) сайтах - оно не было замечено ;).
Он де-факто устроен тупо - там нет функции "deep crawl", только "update" - потому, оно ходит и трусит все подряд. Может одно и тоже по 10 раз, пока база не обновится (там ничего не было сказано о постоянном обновлении и вполне может быть, что все "grub-ы" прийдут на один сайт сразу). Может мне не все понятно, но это нечто подобное freshbot-у.
Писали явно "профи" ...