Вы можете указывать здесь хост с префиксом WWW, и без него. Лучше всего вводить в зависимости от того как сайт проиндексирован поисковой системой.
Правильно так:
User-agent: *
Allow: /
Host: www.сайт.ru
и так:
Host: www.сайт.ком
Можно еще на обоих сайтах в файле robots.txt в диррективе Host указать соответствующий хост.
http://help.yandex.ru/webmaster/?id=996567#996574
Причина в том что был каталог именно на этом движке, или вообще каталог?
Где можно скачать Allsubmiter версии старше 3.0? или все покупают?
Называть Вы его можете как хотите ("Моя селёдка! Хочу покрашу, хочу на стенку повешу".), но "Белым" принято называть сайт, который ставит прямые ссылки безвозмезно, "то есть даром". Если вы хотите сделать хороший общетематический каталог, то он обязан быть белым.
Некоторые каталоги сначала ставят редирект (но публикуют ссылку сразу), а уже после проверки ставят прямую ссылку.
Не знаю с каких это пор 404 это нормально. Да и зону "name" первый раз вижу.
Поменяйте хостера.
Я не часто пользуюсь каталогами, да и врядли кто-то из знакомых так делает. Единственный каталог в который я иногда захожу это ЯКа. Хотя знаю пару приличных каталогов, но все они платные и общетематические.
Мне как пользователю легче воспользоваться поисковой системой, хотя как Сео я понимаю, что в модерируемых тематических каталогах быстрее найдешь то, что ищешь.
Видимо каталого улетел.
Спасибо.
Почему? Я так понимаю, что за спам они забанить не могут, но вот к примеру, если есть 2 одинаковых сайта в 1 выдаче (явно принадлежащих одному человеку), то по идее после подачи жалобы Яндекс должен их склеить. Или если дорвей, то забанить дорвей, если спам с форумов, то понизить релевантность этих ссылок.
Если не так то поправьте.