Никита, с днем рожденья! Успехов во всем!
http://smallweb.ru/library/ Денис осилишь 140 ссылок тут? или 224 в списке всех авторов? Практика показывает, что можно осилить и без особых проблем.
Коллеги!
Вчера я устраивал разборки с людьми которые опоздали на работу. Всех
опоздавших я попросил написать объяснительную в письменном виде.
Объяснительная Васи Хомко в аттаче. Наслаждайтесь, Вася, ты штрафуешься
на 50долларов за вчерашнее катастрофическое опоздание на работу, также ты
премируешься на 25 долларов за самую креативную объяснительную которую я
видел в жизни. Итого = - 25 долларов с
майской з/п.
С Уважением,
Генеральный директор
Объяснительная
Documents and Settings\_ваш_логин_\Application Data\Mozilla\Firefox\Profiles\_ваш_профиль_\bookmarks.bak переименовать в bookmarks.html
По деньгам и скоростям распиши. Хочу провайдера менять, мой текущий заколебал, по самое немогу.
С удовольствием почитаю.
Все работает.
85.21.201.51 - - [18/May/2006:00:30:55 +0400] "GET / HTTP/1.0" 301 295 "-" "WebAlta Crawler/1.3.10 (http://www.webalta.ru/bot.html) (Windows; U; Windows NT 5.1; ru-RU)" 85.21.201.51 - - [18/May/2006:00:30:55 +0400] "GET /robots.txt HTTP/1.0" 301 305 "-" "WebAlta Crawler/1.3.10 (http://www.webalta.ru/bot.html) (Windows; U; Windows NT 5.1; ru-RU)" 85.21.201.51 - - [18/May/2006:00:45:14 +0400] "GET /robots.txt HTTP/1.0" 301 305 "-" "WebAlta Crawler/1.3.10 (http://www.webalta.ru/bot.html) (Windows; U; Windows NT 5.1; ru-RU)" 85.21.201.51 - - [18/May/2006:00:45:14 +0400] "GET / HTTP/1.0" 301 295 "-" "WebAlta Crawler/1.3.10 (http://www.webalta.ru/bot.html) (Windows; U; Windows NT 5.1; ru-RU)"
И таким образом краулер мучал сайт в каждые ~20 минут весь день. Может как-то обрабатывать 301 редирект?
Берите пример Yahoo!:
72.30.110.28 - - [18/May/2006:00:30:38 +0400] "GET /robots.txt HTTP/1.0" 301 305 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)" 72.30.110.28 - - [18/May/2006:00:30:39 +0400] "GET /robots.txt HTTP/1.0" 200 185 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)"
Поисковые системы вообще полезны. Например, если поискать на yandex.ru "все бабы дуры", то на первом месте будет "Все бабы - дуры, и я в их числе". А если поискать "все мужики кобели", то на первом месте будет "Неправда то, что все мужики - кобели".
Вроде никак