Зачем? По умолчанию всё индексируется.
роботс - это больше запрещающий файл
Яндекс плохо реагирует на всё кроме 200?
Толку от этого мало будет. Люди и другими поисковиками могут пользоваться.
Ага, скандальных статей :)
Зеркало хотя бы :). Но можно и сайт-сателлит.
Правильно. На сайте нет обратных ссылок
Есть множество ответов в разделе для новичков.
Ещё можно (редко где есть) JS-новости, Яше, например. Так сразу код ставишь, и - порядок. Но там надо менять JS-код для подгонки к дизу.
Сделать парсер XML или воспользоваться готовым.
на http://phpclub.ru полно этого добра, стоит только поиском воспользоваться
Вики движки очень неплохо индексируются.
Это как? Как Рама узнаёт, на каком движке сделан сайт?