;) Можно попробовать другой подход - добавить немного брутальности и резкости. ИМХО это сильнее провоцирует на ответ.
на slashdot написано, что он использует базу overture.com + применяет свою технологию кластеризации http://vivisimo.com/
Боты поисковиков:
http://www.jafsoft.com/searchengines/webbots.html
Довольно большой список ботов:
http://www.psychedelix.com/agents.html
(The Web Robots Database, правда больше любительских)
http://www.robotstxt.org/wc/active.html
и так уже есть :) нафиг сканировать, скачивай если нужно.
это да, правда интересную информацию там найти можно.
Даже пример есть. Вышла книжка из той же серии про Amazon, там был один рецепт - типа грабилка списка того, что люди хотели бы купить/ищут для покупки (на амазоне такое раньше вывешивалось). После публикации :) такую феньку убрали.
В декабре 2004, так что coming soon ;)
я тоже 3-ный скачал. нормально и картинки имеются, только черно-белые ;)
З.Ы. для интересующихся, есть еще одна интересная книжка по теме:
O'Reilly - Spidering Hacks 100 Industrial-Strength Tips & Tools (2003) скачивается там же:
ed2k://|file|Calishain%2C%20Hemenway%20-%20Spidering%20Hacks%20(O'Reilly%2C%202003).chm|1452649|14627e512ca7b6e9a0375820f68cf8cf|/
Анонсируют выход еще одной книги по Google (издательство Syngress ):
Google Hacking for Penetration Testers
By Johnny Long
Google Hacking for Penetration Testers explores the explosive growth of a technique known as Google Hacking. This simple tool can be bent by hackers and those with malicious intents to find hidden information, break into sites, and access supposedly ...
Dec.2004
( http://www.oreilly.com/catalog/1931836361/index.html )
сенькс за урл.
м-да, и чем же оно лучшее? Ничем, оно наиболее простейшее
Никто про ASP ничего не сказал или Python (который более логичный и структурированный чем перл ).
"Даже для крупных проектов" - предпочтительнее то, чем хорошо владеешь.
Apache+mod_perl - эта парочка как раз для больших проектов.
2fusand. наверное очень сложно переходить на "вольные" языки высокого уровня, когда привык к совершенно другому принципу программирования.
[This message has been edited by Green Kakadu (edited 24-01-2002).]
^/f([0-9]+)/s([^/]+?)$
замени на:
^/f([0-9]+)/s([^\/]+?)$
в можно так:
^/f([0-9]+)/s([^\/]*?)$
Знаки: [,],/,+,*,\,(,) - спец символы, перед ними (внутри регулярного выражения) нужно ставить \
т.е. не [^/], а [^\/]
во всяком случае на Perl'е так
------------------
WebScript.Ru - RulezzZ!
[This message has been edited by Green Kakadu (edited 03-01-2002).]
перед тем как перейти на VBB советую посмотреть, сможешь ли ты потом конвертировать базу форума на новый скрипт, если таковое желание появится. С UBB-> VBB есть, а вот с самой VBB на какой-то другой в свое время не было не знаю как сейчас.
