Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Останутся ли страницы в индексе если их закрыть в robots.txt?

12
IRREWERSIBLE
На сайте с 16.03.2006
Offline
216
IRREWERSIBLE
#11

IRREWERSIBLE добавил 23.03.2009 в 14:00

Str256:
http://yandex.ru/yandsearch?text=sitemaps+%D0%BF%D1%80%D0%B8%D0%BE%D1%80%D0%B8%D1%82%D0%B5%D1%82%D1%8B&stpar2=%2Fh1%2Ftm16%2Fs1&stpar4=%2Fs1&stpar1=%2Fu0

Еще тут http://www.sitemaps.org/

skype andreylaki1984
S2
На сайте с 07.01.2008
Offline
611
Str256
#12
IRREWERSIBLE:
IRREWERSIBLE добавил 23.03.2009 в 14:00
Еще тут http://www.sitemaps.org/

Нет тут: http://www.sitemaps.org/ru/protocol.php

Приоритетность URL относительно других URL на Вашем сайте. Допустимый диапазон значений — от 0,0 до 1,0. Это значение не влияет на процедуру сравнения Ваших страниц со страницами на других сайтах — оно только позволяет указать поисковым системам, какие страницы, по Вашему мнению, более важны для сканеров.

Приоритет страницы по умолчанию — 0,5.

И эта ссылка есть - по моей первой ссылке.

Str256 добавил 24.03.2009 в 12:45

Вот советы от Яндекса:

Могу ли я помочь роботу быстрее индексировать мой сайт?Чтобы ускорить появление страниц сайта в поиске, воспользуйтесь нашими рекомендациями — во-первых, исключите из индексации ненужную информацию, во-вторых, сообщайте роботу о новых страницах. Для этого:

запретите в robots.txt индексацию страниц, неинтересных пользователям. Например, формы ответа на форуме, статистику посещений, сайты-зеркала, документы на нераспространенных в рунете языках;
создайте карту сайта, то есть страницу или несколько страниц, которые содержат ссылки на все документы сайта;
настройте сервер на выдачу корректных заголовков ответов (например, если страница не существует, выдавать ошибку 404, а если поступил запрос «If-Modified-Since», то выдавать код 304, если страница с указанной в запросе даты не изменялась).
Не надо приписывать мне свои выводы, я имею ввиду только то, что написал. Лучшая партнёрка по футболкам/толстовкам (http://partnerka.kolorado.ru/?ref=1921540) Опрос: Проверить текст на уник - как? (/ru/forum/495885)
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий