бот упорно игнорирует сайт

E
На сайте с 01.01.2004
Offline
6
830

скормил гуглу сайт больше месяца назад. За это время бот приходил раз десять. Стандартная картина: дергает robots.txt и корневую страницу, которая затем периодически появляется в результатах поиска, но не надолго. Вглубь сайта бот не идет. Причина не понятна, ничего криминального не использовал.

В robots.txt ничего особенного:

User-agent: *

Disallow: /cgi-bin/

Disallow: /bla-bla/

Disallow: /bla-bla2/

Disallow: /bla-bla3/

Какие есть мысли кроме "подождать" ?

C
На сайте с 19.09.2001
Offline
120
#1

В таком случае иногда помогают внешние ссылки на внутренние страницы сайта.

С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)
E
На сайте с 01.01.2004
Offline
6
#2

Поставил на прошлой неделе, ждем.

IL
На сайте с 04.10.2003
Offline
219
IDL
#3
Как писал Edward
скормил гуглу сайт больше месяца назад. За это время бот приходил раз десять. Стандартная картина: дергает robots.txt и корневую страницу, которая затем периодически появляется в результатах поиска, но не надолго. Вглубь сайта бот не идет. Причина не понятна, ничего криминального не использовал.

В robots.txt ничего особенного:

User-agent: *
Disallow: /cgi-bin/
Disallow: /bla-bla/
Disallow: /bla-bla2/
Disallow: /bla-bla3/


Какие есть мысли кроме "подождать" ?

ну если жрёт только корневую страницу,то возможно сайт имеет низкий ПР,тебе правильно сказали - надо внешних ссылок.На ВМВ тоже такой вопрос был поднят.Сказали что просто надо нарастить ПР

[Удален]
#4
Как писал Edward
Какие есть мысли кроме "подождать" ?

Если страницы динамические и с параметрами, то посмотрите, чтобы в параметрах сочетание "id" не использовалось.

E
На сайте с 01.01.2004
Offline
6
#5

Чистая статика. Буду пока придерживаться версии IDL. Хотя смущает меня версия зависимости индексации от ПР. По такой логике новый сайт даже с качественным и интересным контентом на старте находится в неравном положении относительно просто старых сайтов.

IL
На сайте с 04.10.2003
Offline
219
IDL
#6
Как писал Edward
Чистая статика. Буду пока придерживаться версии IDL. Хотя смущает меня версия зависимости индексации от ПР. По такой логике новый сайт даже с качественным и интересным контентом на старте находится в неравном положении относительно просто старых сайтов.

так точно

гугл по-своему прав

нах индексировать большой сайт,полностью если он даже не смог получить минимального ПР ?

Поэтому маркетологи так любят минисайты :)

на эту тему почему сайт не индексируется полностью можно прочитать здесь

http://www.webmasterworld.com/forum3/21973.htm

IL
На сайте с 04.10.2003
Offline
219
IDL
#7
Как писал Edward
Чистая статика. Буду пока придерживаться версии IDL. Хотя смущает меня версия зависимости индексации от ПР. По такой логике новый сайт даже с качественным и интересным контентом на старте находится в неравном положении относительно просто старых сайтов.

А вот сейчас даже не знаю как отреагировать.Сайт новый с ПР=0,но много внешних ссылок.В базе был только одна индексная пага.Сейчас ещё дона появилась,то есть бот пошёл дальше при 0-м ПР.Хотя тут можно ситуацию трактовать неоднозначно,так как сайты на меня ссылаются не только на индексную пагу,но и на остальные

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий