RiveSolutions SEO Spider

Все результаты, которые я приводил выше, я не оценивал, как хорошие или плохие. Я приводил для сравнения. Ваша программа была несколько медленней лягушки. А вот результат Smart SEO Tool оказался значительно хуже.

Вышло обновление 1.0.6

Изменения:

• Добавлена уникальная функция Яндекс Метрика Finder
• Исправлен баг с невозможностью запустить краулинг с помощью второй кнопки Enter на клавиатуре
• Исправлен размер текста в настройках для удобства чтения параметров
• Немножко отредактирована страница настроек прокси. Некоторые контролы перемещены вправо
• Исправление крашей
• Программа полностью переведена на русский язык

Главная фишка этого обновления - Яндекс Метрика Finder

Яндекс Метрика Finder позволяет Вам определить, действительно ли Вы получаете полную статистику по посещаемости сайта из Яндекс Метрики.

Достигается это, за счет поиска конкретных счетчиков Яндекс Метрики на страницах Вашего сайта.

Все, что Вам нужно сделать - включить функцию поиска счетчиков и ввести номер счетчика для поиска!

Жизненный пример

Да, у нас есть ранние бета тестеры, которые получают сборки RiveSolutions SEO Spider для разработчиков.

Они успели протестировать эту фишку.

Нам запомнился пример одного интернет магазина.

По странным причинам из всего десяти тысяч (цифрами 10000!) страниц, на четырех тысячах (цифрами 4000!) не был установлен счетчик Яндекс Метрики.

В результате владельцы интернет магазина банально получали неверную статистику посещаемости!

Достаточно просто запустить программу, далее программа обнаружит наличие обновлений и попросит обновиться сама.
Если вы еще не установили программу, то загрузить ее можно по ссылкам:
x64 windows 7 и выше - http://rivesolutions.com/downloads/win/x64/dist/seospiderinstaller-offline.exe
x86 windows 7 и выше - http://rivesolutions.com/downloads/win/x86/dist/seospiderinstaller-offline.exe
Или на официальном сайте - http://rivesolutions.com

Не хватает в работе какой-то фичи в работе? Не стесняйся предложить её реализацию нам:

• по почте №1: apugachev@rivesolutions.com
• по почте №2: ekushnarev@rivesolutions.com
• по почте №3: kchetverikov@rivesolutions.com
• по почте №4: feedback@rivesolutions.com
• вконтакте: https://vk.com/public167900805
• по skype: andrascii
• или просто через окно отзывов в программе "Help" => "Send Feedback"

Узнай над чем мы сейчас работаем: https://trello.com/b/6yoC35b0/rivesolutions-seospider

Также мы предлагаем Вам вступить в нашу группу вконтакте https://vk.com/public167900805

Обновление 1.0.7

Изменения:

• Реализован новый, более быстрый загрузчик. Теперь анализ сайта может занимать в разы меньше времени
• Добавлено уведомление о необходимости перезагрузки программы при смене некоторых настроек, что более User Friendly
• Добавлена колонка с типом протокола ссылки. Теперь в отдельном поле отображается протокол, http или https, удобно для сортировки
• Добавлена колонка, выводящая информацию о времени загрузки страницы
• Добавлено обрезание пробелов по краям значения тегов H1/H2, теперь данные нормально отображаются в таблице
• Link Info Tables (таблицы с Inlinks/Outlinks/HTTP Response Headers) теперь при старте программы скрыты, чтобы не занимать лишний раз область на экране
• Исправлены и дополнены переводы на русский язык
• Исправлен баг отображения количества проанализированных ссылок (раньше оно могло не совпадать с тем количеством, что есть в таблице всех ссылок в разделе `Все страницы сайта`)
• Исправлен баг с заданием паузы между запросами. Раньше, она применялась всегда, даже если опция выключена
• Исправлен баг отображения ссылок на страницу при включенной кастомной сортировки таблицы. Ранее при сортировки по номеру страницы по убыванию (как пример), ссылки на выбранную страницу были неверными
• Реализован краулинг hreflang. В `Настройках краулера` можно включить эту опцию
• Реализовано использование паникода
• Изменена дефолтная ширина списка страниц настроек в окне настроек так, чтобы помещались все описания
• Исправлена невалидная ширина кнопок в виджете обновления программы. Теперь весь русский текст помещается в ширину кнопки
• Исправлен баг добавления новых фильтров поиска счетчиков яндекс метрики. Ранее невозможно было сразу добавить 3-4 новых фильтра
• Опция `Переходить по внешним nofollow ссылкам` теперь является подопцией опции `Переходить по внешним ссылкам` на странице настроек `Настройки краулера`
• Пофикшен краш при быстром рестарте программы. Ранее программа могла покрашиться, если ее быстро закрыть и тут же заново запустить
• Переименован фильтр `Слишком длинные ссылки` на `Слишком длинные URL адреса`, что более четко описывает предназначение фильтра
• Исправлен баг поиска страниц с остсутствующими счетчиками Яндекс Метрики. Раньше поиск производился также и для внешних страниц
• Добавлены новые правила поиска страниц с отсутствующим счетчиком Яндекс Метрики в соответствии с обновленным методом отправки статистики Яндексом
• Исправлен баг зависания окна `Starting crawler...` при вводе несуществующего URL-адреса
• Добавлена опция максимального количества параллельных соединение с сервером для увеличения скорости анализа сайта (доступно только если вы используете новый загрузчик)
• Временно убраны возможности сохранения состояния анализа проекта в файл

База знаний

Мы собираем часто задаваемые вопросы и публикуем их в своей базе знаний.

Эту базу знаний вы можете найти здесь: https://rivesolutions.com/faq/

Попробуйте, возможно ответ на ваш вопрос уже есть.

Мы постоянно пополняем эту базу и публикуем там мини статьи в стиле How To, так что для вас это действительно весьма полезно.

Новый загрузчик

Многие сервера имеют тенденцию обрезать скорость загрузки для одного соединения [IP address/port].

Мы написали новый загрузчик, который позволяет вам самим регулировать скорость анализа сайта.

Достигается это путем задания максимального количества параллельных соединений.

Задать эту настройку можно перейдя в `Настройки лимитов` => `Максимальное число активных соединений`.

Имейте ввиду - да, эта вещь быстрая, но до сих пор тестируется.

Если у вас возникают какие-то проблемы с загрузчиком, то вы всегда можете запустить программу с параметром --use_old_downloader

Старый загрузчик поддерживает максимум 6 параллельных соединений, он медленней, но уже многими протестирован и он просто работает.

Также стоит знать, что задавая слишком большое количество параллельных соединений у вас при недостаточной скорости интернета

загрузка страниц может начать возвращать код Timeout.

Происходит это по вполне понятное причине: попробуйте одновременно в браузере загрузить 500 страниц при учете, что загрузка будет происходить не при открытии страницы, а сразу.

Предварительные тесты при скорости интернета в 50мбит/с показали следующие результаты (Каждый тест проводился ровно 5 минут):

Сайт №1

• Старый загрузчик (6 соединений): 7963 страницы
• Новый загрузчик (24 активных соединения): 26436 страниц

Сайт №2

• Старый загрузчик (6 соединений): 4129 страницы
• Новый загрузчик (24 активных соединения): 8451 страниц

Сайт №3

• Старый загрузчик (6 соединений): 5553 страницы
• Новый загрузчик (24 активных соединения): 57895 страниц

Сайт №4

• Старый загрузчик (6 соединений): 11980 страниц
• Новый загрузчик (24 активных соединения): 46000 страниц

Для обновления вашей текущей версии программы, нажмите `Помощь` => `Проверить наличие обновлений` или `Help` => `Check for Updates`
Если вы еще не установили программу, то загрузить ее можно по ссылкам:
x64 windows 7 и выше - http://rivesolutions.com/downloads/win/x64/dist/seospiderinstaller-offline.exe
x86 windows 7 и выше - http://rivesolutions.com/downloads/win/x86/dist/seospiderinstaller-offline.exe
Или на официальном сайте - http://rivesolutions.com

Не хватает в работе какой-то фичи в работе? Не стесняйся предложить её реализацию нам:

• по почте №1: apugachev@rivesolutions.com
• по почте №3: kchetverikov@rivesolutions.com
• по почте №4: feedback@rivesolutions.com
• вконтакте: https://vk.com/public167900805
• по skype: andrascii
• или просто через окно отзывов в программе "Help" => "Send Feedback"

Также мы предлагаем Вам вступить в нашу группу вконтакте https://vk.com/public167900805

Спасибо за внимание. Ждем ваших отзывов!

Отдельно хочу сказать, что на сервер залили 1.0.7 версию мы с небольшим опозданием.

Около полу часа назад. Так что те, кто возможно успел скачать старую 1.0.6 версию после анонса, теперь могут обновиться на 1.0.7

Также обратите внимание, что:

Для обновления вашей текущей версии программы, нажмите `Помощь` => `Проверить наличие обновлений` или `Help` => `Check for Updates`

В противном случае уведомления об обновлении вы не увидите.

Автор тоже выдало ошибку при установке, windows 10, i9, 64GB оперативы, антивирусов и ничего подобного что бы могло заблокировать программу нет. Может поправите? Или вам баг репорт с скриншотом ошибки и тех.характеристиками компа выслать?

Внушительный у вас ПК ☝

Да, вышлите пожалуйста.

Спасибо.

---------- Добавлено 18.12.2018 в 22:56 ----------

Но я подозреваю, что у вас не установились редистрибутивы Visual Studio.

Если это именно эта ошибка, то она не повлияет на работоспособность программы.

Мы о ней знаем. Дело в том, что редистрибутивы не устанавливаются, если они у вас уже установлены. Так что у вас должно получиться запустить программу.

Ну в любом случае, если пришлете репорт, лишним не будет.

Да, проблема была именно в Visual Studio, обновил его вручную и программа запустилась. Спасибо за подсказку!) Программу затестим студией и отпишемся через месяц примерно, распишем что и как нужно улучшить на наш взгляд, мб прислушаетесь и сделаете ваш софт еще интереснее и приятнее)

---------- Добавлено 19.12.2018 в 00:57 ----------

Кстати, вот это поправьте сразу, сейчас все поисковики видят макс 320 символов в description (Яндекс в Москве кое где бывало и 360 выдавал). В данном случае это не ошибка, а у вас светится красным =)

Я не слишком долго изучал интерефейс и, может быть, чего-то не понял.

Но вот при переходе в Отчет я вижу строку, приведенную на скриншоте. Битых изображений, как будто, и нет. Но, на самом деле, они есть. И чтобы их увидеть, надо свернуть страницу, а потом снова развернуть.

(Смотрю на компе, браузер Хром)

Свернули/Развернули браузер и теперь мы видим наличие битых изображений.

Но битые картинки надо бы удалить. А где они, как их найти? Я не сумел.