Если на сайте есть определенное количество контента, и гугл пока его не проиндексировал, тогда если я буду постепенно заливать имеющийся у меня контент, сайт будет выглядеть как постоянно обновляющийся...
Delarante: Вы размещаете контент для Гугла? или людей??
Понимаете, мой сайт новый, и на данный момент на него никто не заходит, кроме меня. Поэтому пока я добавляю контент для гугла, пока сайт еще не дошел до нужной кондиции.
насколько я знаю, host прописывается в отдельном правиле для Яндекса иначе остальные поисковики будут писать о том что имеется неверная запись в роботс....
ZagZag: а потом в нотпаде поменяйте приоритет посадочным страницам.
А Вы не могли бы подсказать, что за приоритет? И как это делается??
---------- Добавлено 10.07.2012 в 17:40 ----------
splish: Напишите модуль для генерации если это не CMS (cms сами генерируют), поставьте на cron авто генерацию карты допустим раз в день в 00:00. и спите спокойно.
Мой сайт сделан на джумла...
А что за cron?
Не могли бы Вы более подробно расписать Ваше предыдущее сообщение?
Добавляйте, конечно) почему нет?
Но смотрите, как я рассуждаю.
Если на сайте есть определенное количество контента, и гугл пока его не проиндексировал, тогда если я буду постепенно заливать имеющийся у меня контент, сайт будет выглядеть как постоянно обновляющийся...
Или я что-то не так понимаю???
Вы размещаете контент для Гугла? или людей??
Понимаете, мой сайт новый, и на данный момент на него никто не заходит, кроме меня. Поэтому пока я добавляю контент для гугла, пока сайт еще не дошел до нужной кондиции.
прогоните по соц. закладкам
Подскажите, пожалуйста, что за соц. закладки? И что значит прогнать по ним??
---------- Добавлено 13.07.2012 в 21:34 ----------
купите 1 ссылку с новостника
Что за новостник? новостной портал имеете в виду?
Вот дотошный какой.
Один из ключей к успеху)) имхо
Вот и вся структура robots для стандартного проекта.
Хорошо, а допустим я бы закрывал от разных ПС разные разделы своего сайта. То есть у меня были бы User-agent: Yandex, User-agent: Google и т.д.
В таком случае куда вписывать Sitemap?
В конец? После последнего User-agent?
Вот и все.
насколько я знаю, host прописывается в отдельном правиле для Яндекса иначе остальные поисковики будут писать о том что имеется неверная запись в роботс....
Useragent:* и яндексу дает рекомендации тоже.
Яндекс ведь требует директиву host, поэтому я сделал отдельно.
Если сайтмап в корне лежит
А если сделать так, как Вы прислали это будет относиться и к другим роботам тоже? помимо яндекса?
Купил конечно, 600 рубликов все удовольствие.
Спасибо, куплю)
а потом в нотпаде поменяйте приоритет посадочным страницам.
А Вы не могли бы подсказать, что за приоритет? И как это делается??
---------- Добавлено 10.07.2012 в 17:40 ----------
Напишите модуль для генерации если это не CMS (cms сами генерируют), поставьте на cron авто генерацию карты допустим раз в день в 00:00. и спите спокойно.
Мой сайт сделан на джумла...
А что за cron?
Не могли бы Вы более подробно расписать Ваше предыдущее сообщение?