RiveSolutions SEO Spider - Форум об интернет-маркетинге
Этот сайт существует на доходы от рекламы.
Пожалуйста, выключите AdBlock.
Вернуться   Форум об интернет-маркетинге > >
Ответ
 
Опции темы
Старый 13.06.2018, 15:48   #1
Студент
 
Регистрация: 22.05.2018
Адрес: Москва
Сообщений: 45
Репутация: 6394
Социальные сети Профиль в ВКонтакте

По умолчанию RiveSolutions SEO Spider

Коллеги, здравствуйте!

Я являюсь профессиональным разработчиком ПО.
Я представляю RiveSolutions Team - группу разработчиков-энтузиастов. Нас всего трое.
Мы хотим применять наши навыки для создания полезных сервисов и программ.
Нам наскучило чувствовать себя простыми винтиками в большой команде, где приходится фиксить маленькие баги и краши.
Хочется заниматься созданием продуктов ОТ и ДО.

Так уж вышло, что выбор пал на создание программ для интернет-маркетинга.
Первой программой стал SEO Spider.
И вот уже год мы ведем разработку и считаем, что настало время показать то, что у нас получилось за этот год.

Я предлагаю Вам бесплатно попробовать в работе нашу программу, которую можно скачать здесь - http://www.rivesolutions.com

Я хочу построить с Вами как с ЦА максимально открытый контакт, а посему:

1. Я всегда доступен для общения любыми удобными для Вас способами связи:
- по почте: apugachev@rivesolutions.com
- вконтакте: https://vk.com/id51469449
- по skype: andrascii
- для особо интересующихся людей, даже по мобильному телефону.

2. Вы всегда можете быть в курсе наших текущих проблем и знать, над чем мы ведем разработку, просто
посмотрев на нашу доску здесь: https://trello.com/b/6yoC35b0/rivesolutions-seospider

3. Также Вам стоит знать, что Вы, скорее всего именно те люди, которых мы будем слушать в первую очередь.
Это значит, что Вы сможете увидеть как Ваша стоящая идея будет реализована и как она будет функционировать.

Мы только запускаемся и сейчас проходит бета-тестирование, Вы можете скачать программу и пользоваться ей бесплатно.
Но у Вас также есть возможность приобрести ее на 2 года вперед.
Тут еще стоит отметить, что мы действительно целый год вели разработку и не собираемся продавать
Вам воздух, давать пустых обещаний или пропадать, как делают "некоторые".

Нам особенно важен Ваш фидбек, предложение по улучшению, Ваше мнение в целом - это нереально мотивирует.

Спасибо за внимание!
AndrAscii вне форума   Ответить с цитированием

Реклама
Старый 13.06.2018, 16:54   #2
LazyBadger
Профессор
 
Регистрация: 15.06.2017
Сообщений: 666
Репутация: 86756

По умолчанию Re: RiveSolutions SEO Spider

Еще один спайдер от дилетантов? Ну ладно... А вот за это "Подтвердите подписку" - вас будут бить не фигурально, а реально: чувак, по 152-ФЗ вы уже влетели на бабки, не отягощайте себе карму таким педрильским сбором лидов для рассылки.

Нужны тестеры - раздавайте линки: хоть единый, хоть индивидуальный, только вот ПД для этого не нужны.

Английский на сайте - ужасный донный руглиш, не позорьтесь
__________________
Производство жести методом непрерывного отжига
LazyBadger вне форума   Ответить с цитированием
Старый 13.06.2018, 18:08   #3
AndrAscii
Студент
 
Регистрация: 22.05.2018
Адрес: Москва
Сообщений: 45
Репутация: 6394
Социальные сети Профиль в ВКонтакте

ТопикСтартер Re: RiveSolutions SEO Spider

Ну если ввод email так затрудняет, то можно скачать по прямым ссылкам:

x64 windows 7 и выше - http://rivesolutions.com/downloads/w...er-offline.exe
x86 windows 7 и выше - http://rivesolutions.com/downloads/w...er-offline.exe
AndrAscii вне форума   Ответить с цитированием
Старый 13.06.2018, 19:54   #4
Pavel_iticket
Студент
 
Регистрация: 08.06.2018
Сообщений: 14
Репутация: 10

По умолчанию Re: RiveSolutions SEO Spider

Тест не удался. Программа вывалилась в ошибку.
Вы бы определились с языком интерфейса.
Часть на английском, часть на русском.
Мне курсе на 3, за это препод по ООП наказывал.)))
Изображения
 
Pavel_iticket вне форума   Ответить с цитированием
Сказали спасибо:
Старый 13.06.2018, 19:57   #5
AndrAscii
Студент
 
Регистрация: 22.05.2018
Адрес: Москва
Сообщений: 45
Репутация: 6394
Социальные сети Профиль в ВКонтакте

ТопикСтартер Re: RiveSolutions SEO Spider

Павел, да, это проблема связана с тем, что при установке берется Ваша текущая локаль, а она русская. Вот и устанавливается перевод на русский, который на половину сделан. Но акцент делается на английский язык. Пока что. Вы уже не первый, кто пишет об этом. Так что пора этим заняться.

Спасибо за отзыв.
AndrAscii вне форума   Ответить с цитированием
Старый 13.06.2018, 20:00   #6
юни
͏
 
Аватар для юни
 
Регистрация: 01.11.2005
Сообщений: 15,385
Репутация: 1709977

По умолчанию Re: RiveSolutions SEO Spider

AndrAscii, есть описание функционала?
__________________
Новинка - полный автомат для работы с криптой.
Всегда в наличие IPv4. Напишите, чтобы обсудить объёмы и скидки.
юни вне форума   Ответить с цитированием
Сказали спасибо:
Старый 13.06.2018, 20:49   #7
AndrAscii
Студент
 
Регистрация: 22.05.2018
Адрес: Москва
Сообщений: 45
Репутация: 6394
Социальные сети Профиль в ВКонтакте

ТопикСтартер Re: RiveSolutions SEO Spider

Да есть.

В программе все данные представлены в виде фильтров.
Есть страница Audit Info, на ней представлена таблица с фильтрами.
Каждый фильтр описывает определенную проблему на сайте.
Проблемы разные и важность их тоже.

Так есть три категории важности:
1. Info
2. Warning
3. Error

Перечислены по возрастанию важности.

Вот полный список фильтров:

1. Ссылки с символами в верхнем регистре (Links With Uppercase Characters)
2. Ссылки с non-ascii символами (Links With Non-Ascii Characters) - не в латинице.
3. Слишком длинные ссылки (Too Long Links) - длина ссылок, которые считаются длинными задается в настройках Settings => Limit Settings
4. Битые ссылки (Broken Links) - сюда попадают ссылки с ответом 404 от сервера
5. Status Code 4xx - соответственно сюда попадают все ссылки с кодом ответа 4хх
5. Status Code 5xx - аналогично предыдущему фильтру, только сюда попадают ссылки с кодом ответов 5хх, то есть проблемы сервера
6. Временная переадресация 302 (Moved Temporarily 302) - ссылки с 302 кодом.
7. Перманентные переадресации 301 (Moved Permanently 301)
8. Слишком большое количество ссылок на одной странице (Too Many Links On Page) - тоже значение задается из настроек Settings => Limit Settings
9. Страницы с содержанием meta refresh тегов (Pages Contain Meta Refresh Tag)
10. Страницы с фреймами (Page Contain Frames)

Фильтры проблем связанных с Titles

11. Пустые тайтлы или их отсутствие (Empty Titles) - страницы с пустыми значениями тега title или его отсутсвием
12. Дубликаты Title (Duplicated Titles) - поиск дублей тайтлов, сравнение идет посимвольное (пока что, в планах есть добавить сравнение методом Шинглов)
13. Слишком длинные значения тайтлов (Too Long Titles) - максимальная длина задается из настроек Settings => Preferences Settings
14. Слишком короткие тайтлы (Too Short Titles) - минимальная длина задается из настроек Settings => Preferences Settings
15. Тайтлы, дублирующие значение тега H1 (Titles Duplicates H1)
16. Несколько тегов title на одной странице (Several Title Tags On The Same Page)

Фильтры проблем связанных с Meta Descriptions

17. Пустые мета описания страниц (Empty Meta Descriptions)
18. Дубликаты мета описаний (Duplicated Meta Descriptions)
19. Слишком длинные мета описания (Too Long Meta Descriptions) - максимальная длина задается из настроек Settings => Preferences Settings
20. (Too Short Meta Descriptions) - минимальная длина задается из настроек Settings => Preferences Settings
21. Несколько тегов с мета описаниями на одной странице (Several Meta Descriptions)

Meta Keywords - в настоящий момент не очень важные критерии, но добавлены для справки

22. Пустые meta keywords (Empty Meta Keywords)
23. Дубликаты meta keywords (Duplicated Meta Keywords)
24. Несколько тегов meta keywords (Several Meta Keywords)

Заблокированные для индексирования страницы

25. Все страницы, закрытые от индексации поисковыми системами (All Not Indexed Pages)
26. Ссылки, закрытые от индексирования атрибутом rel="nofollow" (Nofollow Links) - страница попадает в этот фильтр, если все ссылки найденные на эту страницу имеют атрибут rel="nofollow"

27. Ссылки, закрытые от роботов (Blocked by robots.txt Pages) - следование конкретному роботу задается в настройках Crawler Settings.
Есть варианты на выбор:
1. GoogleBot
2. YandexBot
3. MailRuBot
4. YahooBot

28. Страницы закрытые с помощью метатега robots или HTTP-заголовка X-Robots-Tag (Blocked by x-robots-tag Pages) - https://developers.google.com/search...meta_tag?hl=ru

H1 tags

29. Страницы без тега H1 (Missing H1)
30. Страницы, дублирующие H1 тег на других страницах (Duplicated H1)
31. Слишком длинные значения тегов H1 (Too Long H1) - длина задается в настройках Settings => Preferences Settings
32. Несколько тегов H1 на одной странице (Several Equal H1 On Page)

H2 tags

33. Страницы без тега H2 (Missing H2)
34. Страницы, дублирующие H2 тег на других страницах (Duplicated H2)
35. Слишком длинные значения тегов H2 (Too Long H2) - длина задается в настройках Settings => Preferences Settings
36. Несколько тегов H2 на одной странице (Several Equal H2 On Page)

Images

37. Изображения превышающие 100кб (Images Over 100 KB)
38. Изображения без атрибута alt (Images With Missing Alt Description)
39. Слишком длинные значения атрибута alt изображений (Too Long Image Alt Description) - длина задается в настройках Settings => Preferences Settings

Имеется возможность экспорта отчета о всех технических проблемах сайта в виде pdf файла на странице Audit Report.
Имеется возможность экспорта всех ссылок выбранного фильтра в excel файл.
Это зачастую нужно, для составления ТЗ. Например Вам может понадобиться собрать все битые ссылки на сайте. Просто экспортируете фильтр и у Вас есть таблица ссылок.

Далее. Для каждой отдельно взятой ссылки Вы можете найти страницу, на которой она была найдена из контекстного меню. ПКМ по ссылке => Go to... => Go to links to this page.

---------- Добавлено 13.06.2018 в 20:54 ----------

Еще имеется возможность создания XML карты сайта. Для этого надо прокраулить сайт, а затем на меню баре выбрать Sitemap => Create XML Sitemap. Там будут перечислены опции по настройке создания карты сайта.

Еще есть страница All Resources - на которой представлены фильтры, которые разбивают сайт по ресурсам.
Например найти все CSS ресурсы на сайте, JS ресурсы, HTML ресурсы, как внешние, так и внутренние.

---------- Добавлено 13.06.2018 в 20:56 ----------

Есть возможность сохранения прогресса краулинга, чтобы остановить его в определенной точке, а затем продолжить анализ сайта с того же места завтра или через любое другое время.
Еще есть возможность кастомизирования user-agent'a в настройках.


---------- Добавлено 13.06.2018 в 21:09 ----------

Цитата:
Сообщение от Pavel_iticket Посмотреть сообщение
Тест не удался. Программа вывалилась в ошибку.
Вы бы определились с языком интерфейса.
Часть на английском, часть на русском.
Мне курсе на 3, за это препод по ООП наказывал.)))
А что конкретно вы делали, что привело к крашу?

Последний раз редактировалось AndrAscii; 13.06.2018 в 21:13..
AndrAscii вне форума   Ответить с цитированием
Старый 13.06.2018, 21:35   #8
AndrAscii
Студент
 
Регистрация: 22.05.2018
Адрес: Москва
Сообщений: 45
Репутация: 6394
Социальные сети Профиль в ВКонтакте

ТопикСтартер Re: RiveSolutions SEO Spider

По поводу функционала, еще хочу упомянуть наличие учета rel="canonical", если вы включаете эту опцию, то в дубликаты не будут попадать такие страницы, с идентичным контентом. Задается опция учета этого атрибута на странице Settings => Crawler Settings.

Ну и банально, некоторые сайты при слишком частых запросах блокируют Вас. Срабатывает DDOS защита.
На этот счет предусмотрена пауза между запросами. И имитирование человеческого поведения, за счет задания диапазона паузы. Например Вы задаете диапазон от 3 до 10 секунд, то пауза будет случайным образом выбираться из этого диапазона.
Изображения
   
AndrAscii вне форума   Ответить с цитированием
Старый 13.06.2018, 21:47   #9
AndrAscii
Студент
 
Регистрация: 22.05.2018
Адрес: Москва
Сообщений: 45
Репутация: 6394
Социальные сети Профиль в ВКонтакте

ТопикСтартер Re: RiveSolutions SEO Spider

юни, ну и соответственно вот настройки создания карты сайта
Изображения
 
AndrAscii вне форума   Ответить с цитированием
Старый 14.06.2018, 02:41   #10
iskrakovrov
Профессор
 
Регистрация: 17.12.2015
Сообщений: 816
Репутация: 48387
Отправить сообщение для iskrakovrov с помощью Skype™

По умолчанию Re: RiveSolutions SEO Spider

О. Так этож тот самый паук, под который деньги собирались? Или нет? По логотипу прямо оно-оно... Тоббот или как там назывались те разработчики...
Даже текстовка до боли похожа

"JLAB – команда опытных программистов, объединившихся в июле 2016г. с целью создания и продвижения на международном рынке комплекса инструментов для профессионального интернет-маркетинга." )))

По теме - установить не удалось - ошибка 3010
http://prntscr.com/juoz80

После "Пропустить" - поставилось. Потестируем
__________________
Мощный софт для работы c Facebook.
Группы Facebook целевые от 500 000 человек. Консультации. Скайп и телеграм iskrakovrov
iskrakovrov вне форума   Ответить с цитированием
Сказали спасибо:
Ответ




Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход



Текущее время: 08:48. Часовой пояс GMT +3.

Регистрация Справка Календарь Поддержка Все разделы прочитаны