PictureYandexGraber- бесплатный парсер картинок.

кто пользуется программой, как вы считаете, нужно ли еще какие-то функции добавить?

Попробовал в работе, в целом ок, но был выявлен трабл, что прога не могла законектится при включенном vpn, без него все ок, ошибок в логе при этом не было никаких. Скорость работы достойная. Несколько моментов по улучшению:

- сделать галочку, при которой все адреса с картинками по разным кеям будут на выходе в одном txt файле, а не в разных

- сделать галочку, при которой в список будут попадать только адреса на латинице, если будут попадаться адреса на кирилице, то их не включать в итоговый список

- сделать галочку с настраиваемыми диапазонами задержки между запросами, например использовать паузу между запросами от 50 до 70 сек

Полазил по сайту, нашел аналог для гугла такой же проги. Полагаю есть смысл объединить эти две проги в одну, а в самой проге уже выставлять источники для парсинга.

1. Думаю сделаю, вы не один, кто это просил

2. не совсем понял, может на примерах объяснить, и не совсем понял для чего это?

3. задержку можно сделать, но зачем? капча ведь никогда не выскакивает + сами картинки скачиваются уже напрямую из сайтов, а не из яндекса

4. на счет объединения думал, но параметры поиска у них разные, может когда-нибудь солью в единое целое, когда будет работать у всех без ошибок

На счет vpn? проверить проблему не могу, так как у меня нет vpn, не в курсе где нибудь можно достать бесплатные хотя бы на время?

1dpro,

По спискам. К примеру прога собрала такое:

http://site.ru/kartinka.jpg

http://сайт.ру/картинка.jpg

http://site.com/kartinka.png

Надо чтобы эта функция убрала строки где есть кирилица и осталось такое:

http://site.ru/kartinka.jpg

http://site.com/kartinka.png

Не все проги и скрипты, которые работают с картинками поддерживают кирилицу, потому по возможности лучше список отфильтровать сразу для удобства.

По задержке я имею в виду такую ситуацию. К примеру нужно собрать 100500 различных урлов картинок, сами картинки я качать не собираюсь. Добавляю в прогу несколько К нужных кеев, запускаю. Прога работает без остановки и начинает собирать адреса. В какой то момент ip с которого она работает станет яндексу не интересен и он будет отправлен в баню. Для этого и предлагаю сделать функцию задержки, чтобы там не парится.

Насчет впн, если есть свои сервера, то можно его поднять на них. К примеру очень прост в установке openvpn, если же нет под рукой сервера, то можно загуглить различные сервисы которые его предоставляют, у некоторых возможен тест на первое время.