Чем провести техаудит по сайту в 200к страниц

H
На сайте с 09.09.2015
Offline
0
535

Всем привет, столкнулся с сайтов в ~200к страниц, нужно пропарсить на битые ссылки и редиректы, но Xenu и NetPeak Spider делают это очень долго и при выгрузки отчета так совсем падает программа. Подскажите, какие еще есть сервисы для парсинга? Может есть что то побыстрее NetPeak? Интересуют как платные, так и бесплатные

L
На сайте с 10.02.2015
Offline
223
#1

Долго они делают не из-за недостатков программы, а из-за большого кол-ва страниц.

Как делал я на сайте с 60К.

Проверял дев-версию, отключал некоторые разделы, чтобы они пока не проверялись.

Программа может падать из-за большого количества замечаний.

Также отключите проверку внешних ссылок.

CB9TOIIIA
На сайте с 22.06.2010
Offline
76
#2

http://alaev.info/blog/post/5308 - ComparseR думаю справится :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий