SiteAnalyzer - бесплатная программа для аудита и анализа сайта

chaser
На сайте с 03.08.2005
Offline
236
217039

Уважаемые коллеги!

После долгого затишья хочу сообщить о возобновлении разработки программы Majento SiteAnalyzer, которая предназначена для анализа и аудита сайта (коды ответа сервера, наличие "битых" ссылок, ссылки на внешние ресурсы, проверка наличия title, keywords, description, заголовков h1-h6, проверка наличия дублей страниц и т.п.). Это бесплатный аналог таких программ, как Screaming Frog SEO Spider и Netpeak Spider.

Анализ производится путем сканирования всех страниц сайта (переобход сайта по ссылкам), после чего, на основе спарсенных данных, можно проводить аудит интересующих параметров.

Основные возможности

  • Сканирование всех страниц сайта, а также изображений, скриптов и документов
  • Получение кодов ответа сервера для каждой страницы сайта (200, 301, 302, 404, 500, 503 и т.д.)
  • Определение наличия и содержимого Title, Keywords, Description, H1-H2
  • Поиск и отображение "дубликатов" страниц, мета-тегов и заголовков
  • Определение наличия атрибута rel="canonical" для каждой страницы сайта
  • Следование директивам файла "robots.txt" либо мета-тега "robots", учет "noindex" и "nofollow" при обходе страниц сайта
  • Ссылочный анализ - определение внутренних и внешних ссылок для страницы (в пределах сайта)
  • Определение количества перенаправлений со страницы (редиректов)
  • Определение уровня вложенности страниц относительно главной
  • Генерация карты сайта "sitemap.xml" (с возможностью разбиения на несколько файлов)
  • Фильтрация (выборка) данных по любому параметру
  • Экспорт отчетов в CSV и Excel (полноценный отчет в Excel-формате)

Отличия от аналогов

  • Низкие требования к ресурсам компьютера, малый расход оперативной памяти
  • Для хранения данных используется локальная база данных, отличающаяся производительностью и надежностью
  • Сканирование сайтов практически любых объемов за счет низких требований к ресурсам компьютера
  • Портативный формат (работает без установки на ПК или прямо со сменного носителя)
  • Бесплатное распространение

Буду рад любым замечаниям и пожеланиям по работе и развитию программы.

Страница программы: http://www.majento.ru/index.php?page=majento-site-analyzer

Скачать: majento-siteanalyzer.zip (2,5 Мб)

SiteAnalyzer ( https://site-analyzer.ru/ ) - Бесплатный аналог Screaming Frog | Форум поддержки ( https://forum.site-analyzer.ru/ ) / Telegram ( https://t.me/siteanalyzer ) | Majento ( https://majento.ru/index.php?page=seo-analize ) - 70+ бесплатных сервисов SEO-аналитики
RedBird
На сайте с 10.05.2010
Offline
128
#1

Протестировал, отличная программа! Обычно пользуюсь древней Xenu's Link Sleuth, вот чего не хватает, что есть в выше упомянутой программе:

1) Возможность начать анализ не с корня сайта, а например с определенной страницы site.ru/category/article.html

2) Почему то не показывает внешние ссылки на youtube видео.

3) Не нашел где посмотреть какие страницы ссылаются, например на найденную битую ссылку.

Чего хотелось бы, не видел программ с таким функционалом (только плагины для CMS): поиск ссылок на удаленные или битые видео youtube.

🚀 Push партнерка с Header Bidding: https://t.ly/LuTl 🍋 Выжимай максимум со всех Push рекламных сетей.
kxk
На сайте с 30.01.2005
Offline
971
kxk
#2

chaser, DA и PA и mozrank пусть парсит можно платно:)

Ваш DEVOPS
chaser
На сайте с 03.08.2005
Offline
236
#3
RedBird:
Протестировал, отличная программа! Обычно пользуюсь древней Xenu's Link Sleuth, вот чего не хватает, что есть в выше упомянутой программе:
1) Возможность начать анализ не с корня сайта, а например с определенной страницы site.ru/category/article.html
2) Почему то не показывает внешние ссылки на youtube видео.
3) Не нашел где посмотреть какие страницы ссылаются, например на найденную битую ссылку.

Чего хотелось бы, не видел программ с таким функционалом (только плагины для CMS): поиск ссылок на удаленные или битые видео youtube.

1. Да, есть такое что берется из ссылки корневой домен, поправим

2. Нужен пример

3. Реализуем в следующей версии

4. Если и добавим то явно не в ближайшее время

---------- Добавлено 25.09.2017 в 14:40 ----------

kxk:
chaser, DA и PA и mozrank пусть парсит можно платно:)

Пока есть более насущные задачи

chaser
На сайте с 03.08.2005
Offline
236
#4
RedBird:
Возможность начать анализ не с корня сайта, а например с определенной страницы site.ru/category/article.html

Проверил - начинает сканировать с введенного URL

Либо также как с Ютубе нужен пример

kxk
На сайте с 30.01.2005
Offline
971
kxk
#5

chaser, Научите вашего паука слать корректные заголовки браузеров и принимать куки, а также корректно следовать за js редиректом.

---------- Добавлено 26.09.2017 в 08:12 ----------

И ещё баг:

сайт запрещён к индексации в файле robots.txt

Вот роботс:

User-agent: *

Disallow: /admin/

Disallow: /template_cms/

Disallow: /plugins/

User-agent: Yahoo

Disallow: /

User-agent: MJ12bot

Disallow: /

Host: https://ddosov.net

Sitemap: https://ddosov.net/sitemap.xml

chaser
На сайте с 03.08.2005
Offline
236
#6
kxk:
chaser, Научите вашего паука слать корректные заголовки браузеров и принимать куки, а также корректно следовать за js редиректом.

---------- Добавлено 26.09.2017 в 08:12 ----------

И ещё баг:
сайт запрещён к индексации в файле robots.txt

Роботс поправим

Что не так с заголовками?

kxk
На сайте с 30.01.2005
Offline
971
kxk
#7

chaser, А, это он из-за роботса нехотел сканировать.

chaser
На сайте с 03.08.2005
Offline
236
#8
kxk:
chaser, Научите вашего паука принимать куки

Куки принимаются, у каждого потока свои

RedBird
На сайте с 10.05.2010
Offline
128
#9
chaser:
Проверил - начинает сканировать с введенного URL
Либо также как с Ютубе нужен пример

Да, действительно начинает сканировать с введенного URL, но в строке URL обрезает до корня (это ввело в заблуждение). И в проектах показывает только URL корня и если я захочу проверить другой внутренний URL этого же сайта, то перезаписывает проект. Это все нужно для того, если я хочу проверить несколько внутренних страниц одного сайта и использую макс. глубину 1, чтобы записывало это в разные проекты.

Насчет ссылок на видео Youtube, например, вот страница: http://www.jlady.ru/soup/kak-varit-uxu-iz-shhuki.html там ссылка такого вида:

<iframe src="http://www.youtube.com/embed/HU96YcPup7Y?feature=oembed" allowfullscreen="" width="500" height="281" frameborder="0"></iframe>
River
На сайте с 25.02.2011
Offline
135
#10

Сделал анализ сайта. В отчете вижу "кривую" внутреннюю ссылку. Можно ли с помощью вашего сервиса определить Урл странички, на которой расположена найденная "кривая" ссылка?

Записки дегустатора напитков (http://www.beerblogger.ru) +18 Bq-Recovery манипуляция ценами ( /ru/forum/1017253)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий