Новый Google spider

E
На сайте с 18.08.2004
Offline
79
795

хттп://www.axandra.com/news/newsletter128.htm

"Googlebot now also accepts the HTTP 1.1 protocol. The new spider might be able to understand more content formats, including compressed HTML."

"The first theory is that Google uses the new spider to spot web sites that use cloaking, JavaScript redirects and other dubious web site optimization techniques. As the new spider seems to be more powerful than the old spider, this sounds plausible."

Lor
На сайте с 28.05.2004
Offline
352
Lor
#1

Этого давно следовало ожидать.

Йопез - форум без модераторов. https://yopez.com
greenwood
На сайте с 08.09.2003
Offline
519
#2

и похоже что это насекомое уже давно орудует ... в логах вижу обращения у жабе

[Удален]
#3

js он с весны ест, причем со всех подсетей.

А теории о том что это более мощный бот для отлова спама звучат несерьезно, так как никаких предпосылок к этому не приводится. Особенно насчет клоакинга весело... показывает "грамотность" автора.

D
На сайте с 20.05.2001
Offline
311
#4

Interitus, это дезинформация от гуля, меня всегда интересовал вопрос, как можно непосредственно по коду отследить редирект на js.

[Удален]
#5

Отследить-то можно - проинтерпретировать, сэмулировать поведение браузера, при современных вычислительных мощностях - вполне решаемо.

А вот как можно из заходов робота, скачивающего страницы, из другой подсети, сделать вывод о том что Гугль с помощью этого робота пытается определить сайты с js-редиректами и клоакингом - это загадка... особый склад ума иметь надо.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий