+1. Бродилка отдает серверу только те куки, какие были этим сервером и поставлены (кука с того же домена).
И еще +1 :) Скорее всего, эти баннеры генерятся автоматически. Зашли на сайт с серпа, прочекался реферер на ключевую фразу - сгенерился баннер с этой фразой.
Хм. Перейдите по ссылкам выше - на
http://195.2.71.2/test/frames/main.htm
и
http://195.2.71.2/test/frames/test.htm
- эти страницы без фреймов изначально. И эта страница тоже без фреймов :)
Вам, насколько я понимаю, надо нечто вот такое:
http://195.2.71.2/test/frames/
С главной страницы ссылаетесь напрямую на (в данном примере)
а они уже яваскриптом открывают себя во фреймах.
Угу. Ставим на Firefox экстеншн User Agent Switcher, прописываем туда Yandex/1.01.001 (compatible; Win16; I) и шастаем по закрытым разделам. Лучше уж по IP.
Особенно будут "рады" <a href="javascript" юзеры с отключенным JS и поисковики. У в строке статуса бродилки при наведении на ссылку этот самый javascript и будет.
<a href="image_big.jpg" target="imagewindow" onclick="window.open(this.href, this.target, 'width=270,height=500');"><img src="image_small.jpg" width="100" height="100" border="0"></a>
Зашел. Кликнул на Экипировка. Минуты две фтыкал, где же собственно Экипировка - какое-то бла-бла с непонятно куда ведущими ссылками (опять на какое-то бла-бла). Где товар, я вас спрашиваю? :)
Подменю справа обнаруживается с трудом. Лучше, ИМХО, в разделе вместо бла-бла выводить, скажем, новинки и список подразделов. Отсутствие корзины и онлайн-заказа в интернет-магазине несколько непривычно.
http://copyscape.com/
Можно и просто в поисковиках отдельные фразы из статьи поискать.
Глюк у Рамблера какой-то...
<offtopic>
Спасибо, поржал :)
</offtopic>
[ATTACH]6497[/ATTACH]
Если правильно реализовано (отдаются правильные заголовки, контент в gzip только при условии, что клиент сказал, что акцептует такое и т.д.), то ничем не чревато. Ибо ни бот, ни бродилка не могут знать, каким образом этот контент испекся :) сервером - динамически из базы, взят из кэша (а у вас именно кэш) и т.д.
В связке IIS(ASP)+MS SQL, например, в работе участвуют кэш MS SQL, кэш IIS, кэш Windows, но никто этого не замечает :)
Мой любимый RFC :)
telnet forum.searchengines.ru:80 GET /showthread.php?p=2143671 HTTP/1.1 Host: forum.searchengines.ru Accept-Encoding: gzip,deflate HTTP/1.1 200 OK Date: Fri, 08 Jun 2007 10:16:21 GMT Server: Apache/1.3.34 (Unix) mod_fastcgi/2.4.2 mod_gzip/1.3.26.1a PHP/5.2.0 with Suhosin-Patch X-Powered-By: PHP/5.2.0 Set-Cookie: bblastvisit=1181297782; expires=Sat, 07-Jun-2008 10:16:22 GMT; path=/ Set-Cookie: bblastactivity=0; expires=Sat, 07-Jun-2008 10:16:22 GMT; path=/ Cache-Control: private Pragma: private Content-Type: text/html; charset=windows-1251 Content-Encoding: gzip Content-Length: 12979 ‹ ì<ksÛVvŸåx"�•ø e)¶(ÐKÊ
telnet forum.searchengines.ru:80 GET /showthread.php?p=2143671 HTTP/1.1 Host: forum.searchengines.ru HTTP/1.1 200 OK Date: Fri, 08 Jun 2007 10:17:11 GMT Server: Apache/1.3.34 (Unix) mod_fastcgi/2.4.2 mod_gzip/1.3.26.1a PHP/5.2.0 with Suhosin-Patch X-Powered-By: PHP/5.2.0 Set-Cookie: bblastvisit=1181297833; expires=Sat, 07-Jun-2008 10:17:13 GMT; path=/ Set-Cookie: bblastactivity=0; expires=Sat, 07-Jun-2008 10:17:13 GMT; path=/ Cache-Control: private Pragma: private Transfer-Encoding: chunked Content-Type: text/html; charset=windows-1251 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html dir="ltr" lang="ru"> <head>