SiteAnalyzer - бесплатная программа для аудита и анализа сайта - Форум об интернет-маркетинге
Этот сайт существует на доходы от рекламы.
Пожалуйста, выключите AdBlock.
Вернуться   Форум об интернет-маркетинге > >
Ответ
 
Опции темы
Старый 24.09.2017, 21:44   #1
Академик
 
Аватар для chaser
 
Регистрация: 03.08.2005
Адрес: Moscow
Сообщений: 1,323
Репутация: 58255
Социальные сети Профиль в ВКонтакте

Lightbulb SiteAnalyzer - бесплатная программа для аудита и анализа сайта

Уважаемые коллеги!

После долгого затишья хочу сообщить о возобновлении разработки программы Majento SiteAnalyzer, которая предназначена для анализа и аудита сайта (коды ответа сервера, наличие "битых" ссылок, ссылки на внешние ресурсы, проверка наличия title, keywords, description, заголовков h1-h6, проверка наличия дублей страниц и т.п.). Это бесплатный аналог таких программ, как Screaming Frog SEO Spider и Netpeak Spider.

Анализ производится путем сканирования всех страниц сайта (переобход сайта по ссылкам), после чего, на основе спарсенных данных, можно проводить аудит интересующих параметров.





Основные возможности
  • Сканирование всех страниц сайта, а также изображений, скриптов и документов
  • Получение кодов ответа сервера для каждой страницы сайта (200, 301, 302, 404, 500, 503 и т.д.)
  • Определение наличия и содержимого Title, Keywords, Description, H1-H2
  • Поиск и отображение "дубликатов" страниц, мета-тегов и заголовков
  • Определение наличия атрибута rel="canonical" для каждой страницы сайта
  • Следование директивам файла "robots.txt" либо мета-тега "robots", учет "noindex" и "nofollow" при обходе страниц сайта
  • Ссылочный анализ - определение внутренних и внешних ссылок для страницы (в пределах сайта)
  • Определение количества перенаправлений со страницы (редиректов)
  • Определение уровня вложенности страниц относительно главной
  • Генерация карты сайта "sitemap.xml" (с возможностью разбиения на несколько файлов)
  • Фильтрация (выборка) данных по любому параметру
  • Экспорт отчетов в CSV и Excel (полноценный отчет в Excel-формате)
Отличия от аналогов
  • Низкие требования к ресурсам компьютера, малый расход оперативной памяти
  • Для хранения данных используется локальная база данных, отличающаяся производительностью и надежностью
  • Сканирование сайтов практически любых объемов за счет низких требований к ресурсам компьютера
  • Портативный формат (работает без установки на ПК или прямо со сменного носителя)
  • Бесплатное распространение
Буду рад любым замечаниям и пожеланиям по работе и развитию программы.

Страница программы: http://www.majento.ru/index.php?page...-site-analyzer
Скачать: majento-siteanalyzer.zip (2,5 Мб)
chaser вне форума   Ответить с цитированием
Сказали спасибо 9 пользователей:

Реклама
Старый 25.09.2017, 00:05   #2
RedBird
Профессор
 
Аватар для RedBird
 
Регистрация: 10.05.2010
Сообщений: 703
Репутация: 126785
Отправить сообщение для RedBird с помощью ICQ

По умолчанию Re: SiteAnalyzer - бесплатная программа для аудита и анализа сайта

Протестировал, отличная программа! Обычно пользуюсь древней Xenu's Link Sleuth, вот чего не хватает, что есть в выше упомянутой программе:
1) Возможность начать анализ не с корня сайта, а например с определенной страницы site.ru/category/article.html
2) Почему то не показывает внешние ссылки на youtube видео.
3) Не нашел где посмотреть какие страницы ссылаются, например на найденную битую ссылку.

Чего хотелось бы, не видел программ с таким функционалом (только плагины для CMS): поиск ссылок на удаленные или битые видео youtube.
RedBird вне форума   Ответить с цитированием
Старый 25.09.2017, 10:54   #3
kxk
Linux Guru
 
Аватар для kxk
 
Регистрация: 30.01.2005
Адрес: USA, Minneapolis
Сообщений: 16,498
Репутация: 555580
Отправить сообщение для kxk с помощью Skype™
Социальные сети Аккаунт в Telegram

По умолчанию Re: SiteAnalyzer - бесплатная программа для аудита и анализа сайта

chaser, DA и PA и mozrank пусть парсит можно платно
kxk вне форума   Ответить с цитированием
Старый 25.09.2017, 14:40   #4
chaser
Академик
 
Аватар для chaser
 
Регистрация: 03.08.2005
Адрес: Moscow
Сообщений: 1,323
Репутация: 58255
Социальные сети Профиль в ВКонтакте

ТопикСтартер Re: SiteAnalyzer - бесплатная программа для аудита и анализа сайта

Цитата:
Сообщение от RedBird Посмотреть сообщение
Протестировал, отличная программа! Обычно пользуюсь древней Xenu's Link Sleuth, вот чего не хватает, что есть в выше упомянутой программе:
1) Возможность начать анализ не с корня сайта, а например с определенной страницы site.ru/category/article.html
2) Почему то не показывает внешние ссылки на youtube видео.
3) Не нашел где посмотреть какие страницы ссылаются, например на найденную битую ссылку.

Чего хотелось бы, не видел программ с таким функционалом (только плагины для CMS): поиск ссылок на удаленные или битые видео youtube.
1. Да, есть такое что берется из ссылки корневой домен, поправим
2. Нужен пример
3. Реализуем в следующей версии
4. Если и добавим то явно не в ближайшее время

---------- Добавлено 25.09.2017 в 14:40 ----------

Цитата:
Сообщение от kxk Посмотреть сообщение
chaser, DA и PA и mozrank пусть парсит можно платно
Пока есть более насущные задачи
chaser вне форума   Ответить с цитированием
Старый 25.09.2017, 17:40   #5
chaser
Академик
 
Аватар для chaser
 
Регистрация: 03.08.2005
Адрес: Moscow
Сообщений: 1,323
Репутация: 58255
Социальные сети Профиль в ВКонтакте

ТопикСтартер Re: SiteAnalyzer - бесплатная программа для аудита и анализа сайта

Цитата:
Сообщение от RedBird Посмотреть сообщение
Возможность начать анализ не с корня сайта, а например с определенной страницы site.ru/category/article.html
Проверил - начинает сканировать с введенного URL
Либо также как с Ютубе нужен пример
chaser вне форума   Ответить с цитированием
Старый 26.09.2017, 08:09   #6
kxk
Linux Guru
 
Аватар для kxk
 
Регистрация: 30.01.2005
Адрес: USA, Minneapolis
Сообщений: 16,498
Репутация: 555580
Отправить сообщение для kxk с помощью Skype™
Социальные сети Аккаунт в Telegram

По умолчанию Re: SiteAnalyzer - бесплатная программа для аудита и анализа сайта

chaser, Научите вашего паука слать корректные заголовки браузеров и принимать куки, а также корректно следовать за js редиректом.

---------- Добавлено 26.09.2017 в 08:12 ----------

И ещё баг:
сайт запрещён к индексации в файле robots.txt

Вот роботс:
User-agent: *
Disallow: /admin/
Disallow: /template_cms/
Disallow: /plugins/
User-agent: Yahoo
Disallow: /

User-agent: MJ12bot
Disallow: /

Host: https://ddosov.net
Sitemap: https://ddosov.net/sitemap.xml
kxk вне форума   Ответить с цитированием
Старый 26.09.2017, 10:42   #7
chaser
Академик
 
Аватар для chaser
 
Регистрация: 03.08.2005
Адрес: Moscow
Сообщений: 1,323
Репутация: 58255
Социальные сети Профиль в ВКонтакте

ТопикСтартер Re: SiteAnalyzer - бесплатная программа для аудита и анализа сайта

Цитата:
Сообщение от kxk Посмотреть сообщение
chaser, Научите вашего паука слать корректные заголовки браузеров и принимать куки, а также корректно следовать за js редиректом.

---------- Добавлено 26.09.2017 в 08:12 ----------

И ещё баг:
сайт запрещён к индексации в файле robots.txt
Роботс поправим

Что не так с заголовками?
chaser вне форума   Ответить с цитированием
Старый 26.09.2017, 10:56   #8
kxk
Linux Guru
 
Аватар для kxk
 
Регистрация: 30.01.2005
Адрес: USA, Minneapolis
Сообщений: 16,498
Репутация: 555580
Отправить сообщение для kxk с помощью Skype™
Социальные сети Аккаунт в Telegram

По умолчанию Re: SiteAnalyzer - бесплатная программа для аудита и анализа сайта

chaser, А, это он из-за роботса нехотел сканировать.
kxk вне форума   Ответить с цитированием
Старый 26.09.2017, 16:13   #9
chaser
Академик
 
Аватар для chaser
 
Регистрация: 03.08.2005
Адрес: Moscow
Сообщений: 1,323
Репутация: 58255
Социальные сети Профиль в ВКонтакте

ТопикСтартер Re: SiteAnalyzer - бесплатная программа для аудита и анализа сайта

Цитата:
Сообщение от kxk Посмотреть сообщение
chaser, Научите вашего паука принимать куки
Куки принимаются, у каждого потока свои
chaser вне форума   Ответить с цитированием
Старый 28.09.2017, 18:44   #10
RedBird
Профессор
 
Аватар для RedBird
 
Регистрация: 10.05.2010
Сообщений: 703
Репутация: 126785
Отправить сообщение для RedBird с помощью ICQ

По умолчанию Re: SiteAnalyzer - бесплатная программа для аудита и анализа сайта

Цитата:
Сообщение от chaser Посмотреть сообщение
Проверил - начинает сканировать с введенного URL
Либо также как с Ютубе нужен пример
Да, действительно начинает сканировать с введенного URL, но в строке URL обрезает до корня (это ввело в заблуждение). И в проектах показывает только URL корня и если я захочу проверить другой внутренний URL этого же сайта, то перезаписывает проект. Это все нужно для того, если я хочу проверить несколько внутренних страниц одного сайта и использую макс. глубину 1, чтобы записывало это в разные проекты.

Насчет ссылок на видео Youtube, например, вот страница: http://www.jlady.ru/soup/kak-varit-uxu-iz-shhuki.html там ссылка такого вида:
Код:
<iframe src="http://www.youtube.com/embed/HU96YcPup7Y?feature=oembed" allowfullscreen="" width="500" height="281" frameborder="0"></iframe>

Последний раз редактировалось RedBird; 28.09.2017 в 18:55..
RedBird вне форума   Ответить с цитированием
Ответ

Метки
majento , siteanalyzer




Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход



Текущее время: 12:49. Часовой пояс GMT +3.

Регистрация Справка Календарь Поддержка Все разделы прочитаны