Http заголовок.

G
На сайте с 02.08.2002
Offline
60
1360

Здравствуйте!

Эта тема уже многократно обсуждалась здесь, давайте подведем итоги. Какие поля должен иметь заголовок, для наилучшей индексации поисковыми машинами?

Постулат 1:

Статика индексируется лучше динамики.

Постулат 2:

Чем чаще приходит робот для индексации, тем лучше.

вот отклик со статической страницы:

-----------------------

HTTP/1.1 200 OK

Date: Fri, 02 Aug 2002 13:25:53 GMT

Server: Apache/1.3.20 (Unix) mod_gzip/1.3.19.1a FrontPage/5.0.2.2510 PHP/4.2.2 mod_fastcgi/2.2.12 mod_ssl/2.8.4 OpenSSL/0.9.5a rus/PL30.5

Connection: close

Transfer-Encoding: chunked

Content-Type: text/html; charset=windows-1251

Vary: accept-charset, user-agent

------------------------

Подозреваю, что не хватает только поля Last-Modified. Это поле не прописано в meta tags, но сервер же должен его сам выдавать если страница действительно статическая? или нет?

Правильно ли я понимаю, что наличие/отсутствие этого тега влияет на посещаемость страницы пауками? Какие еще факторы влияют на это?

Если этот тег необходим, какая дата была бы оптимальной? Представим два варианта:

-сервер выдает страницу с полем Last-Modified содержащим текущую дату.

-это же поле, дата вчерашняя.

-сервер выдает страницу с этим же полем и датой пол года назад.

Что лучше с точки зрения индексации поисковой машиной?

[Удален]
#1
Как писал grecha

вот отклик со статической страницы:
-----------------------
HTTP/1.1 200 OK
Date: Fri, 02 Aug 2002 13:25:53 GMT
Server: Apache/1.3.20 (Unix) mod_gzip/1.3.19.1a FrontPage/5.0.2.2510 PHP/4.2.2 mod_fastcgi/2.2.12 mod_ssl/2.8.4 OpenSSL/0.9.5a rus/PL30.5
Connection: close
Transfer-Encoding: chunked
Content-Type: text/html; charset=windows-1251
Vary: accept-charset, user-agent
------------------------

Подозреваю, что не хватает только поля Last-Modified.

Ну вообще ещё Content-length, весьма странно, что он при включенном mod_gzip не выдается...

В целом - не думаю, что стоит заботиться о HTTP-заголовках, достаточно сделать правильные URL. В любом случае заставить робот ходить чаще путем подбора оптимального Last-modified не удастся.

[Удален]
#2
заставить робот ходить чаще путем подбора оптимального Last-modified не удастся.

Зато можно заставить ходить реже, если Last-modify отсутствует. Не наставаю на этом, но Яндекс советует следить за его наличием.

G
На сайте с 02.08.2002
Offline
60
#3

так какая дата будет там оптимальной? страница динамическая, замаскирована под статическую, дату мона влепить любую..

[Удален]
#4

Не знаю, но могу предположить, что на большом сайте игры с датами могут замедлить процесс индексирования. Т.к. вместо индексирования действительно новых страниц робот будет занят переиндексированием старых с поддельными датами.

NW
На сайте с 10.07.2001
Offline
69
#5

Я ставлю last-modified, но яндекс упорно пишет, что дату сервер не выдаёт. В чём фишка?

Maxim A. Ralnikovhttp://ralnikov.com
K
На сайте с 31.01.2001
Offline
737
#6

Сайт из профайла? Давайте уж конкретный URL.

> telnet ralnikov.com 80

Trying 217.106.231.76...

Connected to ralnikov.com.

Escape character is '^]'.

HEAD / HTTP/1.1

Host: ralnikov.com

HTTP/1.1 200 OK

Server: Microsoft-IIS/5.0

Date: Sat, 17 Aug 2002 10:36:39 GMT

Last-modified: Sat, 17 Aug 2002 2:36:39 GMT

Content-Length: 2253

Content-Type: text/html; Charset=windows-1252

Expires: Sat, 17 Aug 2002 13:36:39 GMT

Set-Cookie: ASPSESSIONIDGQGGQALK=EICJIFKAPAGHIEHMICKOEGED; path=/

Cache-control: private

Last-modified выдается, но совпадает с текущей датой.

Яндексу нетрудно сообразить, что это фуфло.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
[Удален]
#7

А что здесь не так?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий