Нужна мощная программа для генерации карты сайта

12
PrintIP
На сайте с 03.12.2007
Offline
199
1243

Собственно сабж. Нужна мощная программа для генерации карты сайта 64-х битная :) Есть 32-х но не хватает оперативки. Что можете предложить?

vtomas
На сайте с 19.03.2007
Offline
102
#1

PrintIP, есть софтина, сменил комп повторно не активировал, если не горит, могу снова поставить и за спасибо сгенерить вам карту.

Хорошее стоит дорого, на плохое не стоит и тратиться. В поисках VPS захостился здесь (http://ipserver.su), а бэкапы храню здесь (http://billing.markovservers.com/backup/pl.php?65).
PrintIP
На сайте с 03.12.2007
Offline
199
#2
vtomas:
PrintIP, есть софтина, сменил комп повторно не активировал, если не горит, могу снова поставить и за спасибо сгенерить вам карту.

Еле дышит софтина :(

vtomas
На сайте с 19.03.2007
Offline
102
#3

Демо так и будет еле тянуть (один поток), в лицензии 40 пауков сканят сайт, по времени не помню, но три тыс страниц я ей собирал.

PrintIP
На сайте с 03.12.2007
Offline
199
#4

Речь идет о 28-и миллионах :)

vtomas
На сайте с 19.03.2007
Offline
102
#5

Думаю такую кучу собрать будет сложно, не один день проге трудиться, да еще если на сайте какие ограничения стоят, может заблочить доступ.

Удачи.

Удивительно
На сайте с 07.07.2009
Offline
215
#6

Думаю, вам стоит обратиться к создателю программы CheckParams.

Мне кажется, это единственная программа, которая через прокси сможет вытянуть нужный объем страниц за приемлемый промежуток времени.

Не уверен, что подобный функционал в ней уже реализован, но реализовать его автору большого труда не составит.

Если что - через меня скидка 25% ;)

Качественная семантика недорого ( https://moab.tools/ )
[Удален]
#7

Вам нужно выкачать все урлы страниц с тайтлами?

vtomas
На сайте с 19.03.2007
Offline
102
#8

Если так ка говорит Diskorosi, не принципиально отображение уровня вложения страницы, то пойдет эта программа.

PrintIP
На сайте с 03.12.2007
Offline
199
#9

Удивительно спасибо, будем смотреть.

Diskorosi без.

vtomas есть такая в арсенале. На 1400000 захлебывается

GreatKir
На сайте с 25.09.2009
Offline
55
#10

Gsitecrawler не пробовали? Правда, она старенькая уже

Куплю места под ссылки/статьи на площадках по тематике "Полиграфия"
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий