Да и свою тему создать с указанием тематики и других параметров.
Это не последняя индексация, а последнее обновление сайта (и то маловероятно).
Ссылки, как люди - бывают разные (хорошие и не очень).
Дата - это что выдает Ваш Last Modifed.
Если типа 2 часа назад или вчера - это быстрый робот
У меня на основных сайтах вообще ничего нет (или быстрый робот) и ничего.
Если указать в конце .php, Яндекс (это их итерпретация стандарта robots.txt) запрещает конкретно страницу (например profile.php), а страницы с параметрами разрешает к индексации. В данном случае он запрещает все, что начинается с profile (profile.php?lala=blabla, profile_nashey_firmy.html и т.д.). Не думаю, что у кого-то возникнет желание сделать страницу из второго примера :)
Пожалуйста:
User-Agent: * Disallow: /forum/profile Disallow: /forum/memberlist
Тишина...
Жду с содроганием...
У меня в прошлый четверг два новых сайта неплохо вылезли.
[offtop]
А что здесь продают?
А за кем я буду?
А оптом дешевле или по одному в руки?
[/offtop]
🚬
Не знаю на счет тематики, но:
В роботсе, на сайте были запрещены различные ненужные страницы, где не было слов из основных запросов (напримет профили пользователей из форума).
Кол-во страниц сайта снизилось с 3000 до 500.
Изменение мест от +4 до +8 по основным запросам.
1. Не Яндекс выводит морду, а мы сами, проставляя на нее внешние ссылки.
2. Повышает. Контент хороший необходимо постоянно добавлять.
3. Могут снизить. При большом количестве они размывают тематику сайта.
