Индексация и длина URL ?

A
На сайте с 16.03.2009
Offline
12
618

Судя по логам апача, гуглбот индексирует линки по мере увеличения длины. То есть плавным переходом от коротких урлов к длинным. В логе это выглядит как экспонента :-)

Это совпадение или закономерность?

SilverMaster
На сайте с 08.10.2003
Offline
228
#1

совпадение...

как гугль может, к примеру, проиндексировать с вашего сайта страничку 1.хтмл если на нее нет ссылок с главной и внешних ссылок на нее тоже нет?

Из детских комшаров: "А вдруг ночью придет страшный робот!" Из взрослых: "И криво проиндексирует сайт". Не всякий гик добежит до середины поисковой страницы гугла
A
На сайте с 16.03.2009
Offline
12
#2
SilverMaster:
как гугль может, к примеру, проиндексировать с вашего сайта страничку 1.хтмл если на нее нет ссылок с главной и внешних ссылок на нее тоже нет?

Естественно, речь идёт о страницах на которые есть ссылки в sitemap.xml и на человеческой карте сайта. Ссылки там, естественно, не упорядочены по длине.

В логе картина такая:

1.хтмл

12.хтмл

121.хтмл

11111.хтмл

1111112.хтмл

111111113.хтмл

111111111111.хтмл

1111111111111111.хтмл

1111111111111111111.хтмл

11111111111111111111112.хтмл

111111111111111111111111111.хтмл

и так на несколько десятков страниц.

B
На сайте с 07.02.2005
Offline
161
#3

Лог по алфавиту. Упорядочите по датам, экспонента исчезнет. :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий