Спасибо, moonters.
Я продолжу спрашивать конкретные вопросы, в этой теме. Может кому-то еще поможет эта информация.
Появилось еще ряд вопросов. Хотелось бы услышать разные ответы.
1) Те папки которые Я запретил ботам в robots.txt, они не должны индексироваться. Но что делает бот, когда заходит на сайт? Сначала читает robots.txt, потом когда находит на сайте запрещенный раздел/страничку, он на нее заходит? Передается ли вес тем страницам которые Я запретил?(регистрация, правила, теги, результаты поиска и т.д.)
2) Sitemap. Где-то читал, что лучше чтобы была ссылка карты сайта на главной странице. Насколько это актуально?
2.б)На моем сайте каждый день добавляются статьи вручную. Как мне объяснили, карта сайта должна быть динамическая. Правильно ли Я понял, что карта сайта должна выглядеть так?(внизу есть ссылка на site com)
Как это сделать?
3) В статьях иногда хочется дать внешнюю ссылку, и при этом не хочется делится авторитетом. Поможет ли такая конструкция:
<noindex><a href="http://сама_ссылка.ru" rel="nofollow">текст ссылки</a></noindex>
Будет ли передаваться вес? Как сейчас реагирует Гугл на практике?
4) Где-то читал: Давайте изображениям осмысленные имена и избегайте названий вида «image1.png» любой ценой. Означает ли это, что на сервере имя картинки обязательно должно иметь нормально имя? Влияет ли это на продвижения по картинкам? Сейчас на сайте используется alt text.
5) Итого robots.txt должен иметь примерно такой вид? Что-то убрать, добавить?
User-Agent: *
{всякие запрещенные разделы }
Disallow: /url/
Disallow: /concepts/new/
Disallow: /admin/
Disallow: /forum/misc/banners/
Sitemap: http://site.com/sitemap.xml
Host: site.com
З.Ы. Действительно очень благодарен, что здесь пишут ответы- не часто встретишь такое в жизни.
(как тут поднять репутацию, тем людям которые помогают? )
+
нашел интересный метод сокрытия внешних ссылок. Там не было ответов:
/ru/forum/406571
Метод 1 заинтересовал.
Спасибо, moonters, очень четкий ответ.
У меня появился еще вопрос по robots.txt :
На сайте http://www.seo.su/articles.php?id=89 написано:
* Установите пароль:
Защитите паролем информацию, прописанную в robots.txt файле.
ОК, уберу это:
Что, вообще никто не знает?
