На чем писать паука?

1. erlang

2. js: node.js + phantom.js (если будем бегать браузером)

3. python + gevent неплох

4. на чем нравится, кроме php (по понятным причинам) :)

-------

Это если масштабного паука делать. А если парсить с одного сайта, то всё равно на чем - большинство сайтов все равно лягут (от нагрузки - маленькие) или забанят (большие - их уже сто раз парсили).

проще на пхп, но если не принципиально, то лучеш перл и под линукс

Пока хочется со своего средненького десктопа обойти зону .ru (только морды) за пару часов. Реально ли это в принципе?

По каким причинам ?☝

Вроде как есть мысли о python/perl/c (не знаю ни одного из них, знаю php [с его мультикурлом], паскаль/дельфи). Что будет работать быстрее?

На С# - где-то на гитхабе видел готовые граберы. Если осилил не самый простой язык - объектный Паскаль (ака Дельфи), то C# пойдет как по маслу, если жестко не рубиться в глубины "диковиных синтаксических примочек" то там все ясно и понятно, проще объектного Паскаля. + Доки - микрософтовские отличные. Распаралеливание на C# сделано хорошо, удобно, логично-продумано. Вместо него также можно использовать асинхронность, тоже неплохо реализовано. Можно взять виндовскую впс с доступом к экрану и парсить оттуда круглосуточно.

по причинам криворукости некоторых кодеров )

vob2014, благодарю. Паскаль/дельфи изучались лет 10 назад. Вроде было просто. С php работаю последнее время.

Учить новый язык не сильно хочется, но понимать основы и код граббера нужно.

C# будет сильно быстрее python/perl? Там вроде надо за памятью следить внимательнее?

Сами пишите на своих ангри и мультикурлах, я наелся уже, спасибо.

Без разницы на чем писать, главное делать это правильно. Некоторые и на автоите пишут простенькие грабберы и даже ботов для игр.