Netpeak Spider - бесплатная программа для сканирования сайта - Форум об интернет-маркетинге
Этот сайт существует на доходы от рекламы.
Пожалуйста, выключите AdBlock.
Старый 18.07.2013, 15:16   #1
Тёмная сторона силы
 
Аватар для V@der
 
Регистрация: 22.11.2007
Сообщений: 1,009
Репутация: 134231

По умолчанию Netpeak Spider - бесплатная программа для сканирования сайта

Всем привет.

Представляю вашему вниманию бесплатную программу для сканирования и анализа сайта - Netpeak Spider. В программе имеются уникальные возможности расчёта внутреннего PageRank и PageRank без учёта сквозных ссылок, экспорта полученных результатов в Excel и анализа входящих и исходящих внутренних ссылок для каждой страницы сайта.


Полный список анализируемых параметров:
  • URL – адрес страницы.
  • Глубина – уровень расположения страницы относительно главной.
  • LinkCanonical – определяется наличие атрибута rel="canonical" и на какой адрес он указывает.
  • Ответ – код состояния HTTP в ответе сервера (200 OK, 301 Moved Permanently, 302 Moved Temporarily, 404 Not Found, 503 Service Unavailable и т.д.).
  • Title – тег "title", расположенный в контейнере "head", который определяет заголовок документа.
  • Description – содержание мета-тега, отвечающего за краткое описание содержимого веб-страницы.
  • Keywords – содержание мета-тега, отвечающего за ключевые слова, встречаемые на веб-странице.
  • robots.txt – определяется, разрешена (allowed) или запрещена (disallowed) индексация страницы поисковыми системами в файле robots.txt.
  • MetaRobots – определяется наличие мета-тега "robots", а также разрешена (index) или запрещена (noindex) индексация страницы поисковыми системами и разрешён (follow) или запрещён (nofollow) переход по ссылкам на данной странице с его помощью.
  • Редиректы – количество перенаправлений со страницы.
  • Заголовки (H1) – количество заголовков первого уровня.
  • Ссылки с этой страницы – количество исходящих ссылок с данной страницы в пределах всего сайта.
  • Ссылки на эту страницу – количество входящих ссылок на данную страницу в пределах всего сайта.
  • Внутренние ссылки – количество ссылок с данной страницы на сканируемый сайт.
  • Внешние ссылки – количество ссылок с данной страницы на другие сайты.
  • PR – расчёт внутреннего показателя PageRank текущей страницы.
  • PR (без сквозных ссылок) – расчёт внутреннего показателя PageRank без учёта сквозных ссылок, которые встречаются более чем на 50% страниц сканируемого сайта.
  • Дубли по Title – определяются группы страниц с дублирующимся тегом "title".
  • Дубли по Description – определяются группы страниц с дублирующимся мета-тегом "description".
  • Дубли по Keywords – определяются группы страниц с дублирующимся мета-тегом "keywords".

Скачать программу можно по этой ссылке.

Результаты проверки бинарника на сайте Virustotal.com
V@der вне форума   Ответить с цитированием
Сказали спасибо 2 пользователей:

Реклама
Старый 18.07.2013, 15:36   #2
donilstr
Аспирант
 
Регистрация: 01.01.2009
Адрес: RU
Сообщений: 174
Репутация: 2502

По умолчанию Re: Netpeak Spider - бесплатная программа для сканирования сайта

Было бы замечательно, если бы добавили возможность создания проектов для сканирования.
Просто попадаются огромные сайты типа интернет-магазинов, которые надо просканить на наличие ошибок, но вот сканить их по 5 - 7 часов не всегда есть возможность.
А так, создал проект - просканил одну половину сайта сегодня, продолжил сканить завтра. Смысл думаю понятен.
donilstr вне форума   Ответить с цитированием
Старый 18.07.2013, 16:02   #3
sanitarn
Работа - Хобби
 
Аватар для sanitarn
 
Регистрация: 20.08.2007
Адрес: МоскВуааа
Сообщений: 1,629
Репутация: 82030
Отправить сообщение для sanitarn с помощью ICQ Отправить сообщение для sanitarn с помощью Skype™

По умолчанию Re: Netpeak Spider - бесплатная программа для сканирования сайта

Отличный сканер, нужно на большом обьеме проверить.
sanitarn вне форума   Ответить с цитированием
Старый 19.07.2013, 09:59   #4
Detektiv
Аспирант
 
Аватар для Detektiv
 
Регистрация: 28.02.2008
Адрес: Kyiv - Ukraine
Сообщений: 233
Репутация: 9314
Отправить сообщение для Detektiv с помощью Skype™

По умолчанию Re: Netpeak Spider - бесплатная программа для сканирования сайта

Молодцы, фактически сделали бесплатный аналог Screaming Frog. Вот что хотелось бы добавить - сделать стоп список разделов, например на моём сайте я не хочу анализировать языковые версии которые находятся в папках /jp/ /pl/ и т.д. или их уже в текущей версии возможно добавить в исключения?

P.S. и бонусом была бы проверка наличия ссылок в индексе гугла и яндекса и если нет - то оптовое добавление через аддурилку с поддержкой сервисов разбора каптч.
Detektiv вне форума   Ответить с цитированием
Старый 24.07.2013, 17:35   #5
S.k.i.f.f
Doctor Seo
 
Аватар для S.k.i.f.f
 
Регистрация: 18.06.2009
Сообщений: 81
Репутация: 5726
Отправить сообщение для S.k.i.f.f с помощью ICQ

По умолчанию Re: Netpeak Spider - бесплатная программа для сканирования сайта

Отличная программа, которая очень сильно помогает в работе. Самый удобный сканер сайта!
S.k.i.f.f вне форума   Ответить с цитированием
Старый 24.07.2013, 17:36   #6
Monti
Студент
 
Регистрация: 27.02.2009
Сообщений: 19
Репутация: 10

По умолчанию Re: Netpeak Spider - бесплатная программа для сканирования сайта

Проверял на 5к страницах, все шикарно.
Monti вне форума   Ответить с цитированием
Старый 24.07.2013, 22:47   #7
marica
Кандидат наук
 
Регистрация: 05.03.2006
Адрес: Бургас, Болгария
Сообщений: 281
Репутация: 9138
Отправить сообщение для marica с помощью Skype™
Социальные сети

По умолчанию Re: Netpeak Spider - бесплатная программа для сканирования сайта

У меня если больше 30-40 тыс. страниц, жрет RAM немерено
Почти 6 GB от 8
Компьютер постоянно зависает.
У всех так?
marica вне форума   Ответить с цитированием
Старый 28.07.2013, 17:27   #8
FollowLocation
Аспирант
 
Аватар для FollowLocation
 
Регистрация: 19.07.2013
Сообщений: 107
Репутация: 16039

По умолчанию Re: Netpeak Spider - бесплатная программа для сканирования сайта

V@der, отличная программа. Хотелось бы видеть в ней очередь проектов. Очень часто нужно проверять большое количество сайтов.
FollowLocation вне форума   Ответить с цитированием
Старый 28.07.2013, 18:35   #9
VladimirX
The American Dream
 
Аватар для VladimirX
 
Регистрация: 25.07.2013
Адрес: Minsk
Сообщений: 39
Репутация: 1856
Отправить сообщение для VladimirX с помощью ICQ Отправить сообщение для VladimirX с помощью Skype™

По умолчанию Re: Netpeak Spider - бесплатная программа для сканирования сайта

Спасибо за программу. Опробовал. Хорошо работает.
Вместе с тем, хотелось бы пояснения, как рассчитывается PR на внутренних страницах. И что за значения PR программа выдает?
VladimirX вне форума   Ответить с цитированием
Старый 28.07.2013, 18:37   #10
npocToNIK
SEO-специалист
 
Регистрация: 06.08.2011
Сообщений: 100
Репутация: 1419
Отправить сообщение для npocToNIK с помощью ICQ

По умолчанию Re: Netpeak Spider - бесплатная программа для сканирования сайта

Цитата:
Сообщение от FollowLocation Посмотреть сообщение
V@der, отличная программа. Хотелось бы видеть в ней очередь проектов. Очень часто нужно проверять большое количество сайтов.
да, есть такое. памяти жрет много при большом количестве страниц.
npocToNIK вне форума   Ответить с цитированием
Ответ




Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход



Текущее время: 05:51. Часовой пояс GMT +3.

Регистрация Справка Календарь Поддержка Все разделы прочитаны