chaser

chaser
site-analyzer.ru
fb: chaser81
Рейтинг
217
Регистрация
03.08.2005
Должность
SEO-специалист
Интересы
SEO, Delphi, PHP
BatchURLScraper - Извлечение данных методами XPath, CSSPath и RegExp

Новая версия BatchURLScraper 1.4 (build 27), 08.12.2020:

  • исправлена ошибка с валидацией HTML-темплейтов
  • оптимизирована работа с регулярными выражениями
  • добавлена возможность неучета повторений при скрейпинге
  • исправлена проблема с учетом пауз между запросами
  • диапазон пауз между запросами расширен до полутора минут
  • доработан и улучшен перевод программы
  • устранены утечки памяти
Объявления о продаже доменов на сторонних ресурсах. Все объявления сюда!
Продам домен https://position-meter.ru/ (тематика SEO, проверка позиций в Яндекс и Гугл, заинтересованным писать в обратную связь на сайте)
Majento PositionMeter - Быстрое сканирование Яндекс и Google
JobJobovich #:
Всем привет. Пишет что не нашел, хотя фактически 3 страница. Может быть где то я не правильно что то выставил? Хотя вроде поставил ТОП 100. Антикапчу настроил

Привет.

Яндекс лучше через XML сканировали или Majento, а Гугл через ХМЛРивер.

Тогда будет без подобных ошибок.

BatchURLScraper - Извлечение данных методами XPath, CSSPath и RegExp

Новая версия BatchURLScraper 1.3




Что нового:

  • расширено число страниц для парсинга с 1000 до 5000 URL
  • добавлена возможность скрапинга через HTML templates
  • добавлена возможность извлечения данных через атрибуты CSS
  • добавлена возможность скрапинга через внешний и внутренний HTML
  • добавлена возможность использования списков Proxy
  • исправлен баг некорректного сохранения User-Agent

Страница скачивания: https://site-analyzer.ru/soft/batch-url-scraper/

BatchURLScraper - Извлечение данных методами XPath, CSSPath и RegExp
superb #:
Прикольный и потенциально полезный софт, однако мешает ограничение в 1000 урл (
Возможно пересмотрим кол-во в новой версии.
BatchURLScraper - Извлечение данных методами XPath, CSSPath и RegExp

Новая версия BatchURLScraper 1.2




Что нового:

  • добавлен метод скрапинга через XQuery
  • оптимизирован парсинг HTML-кода
  • оптимизирована настройка фильтров для извлечения данных
  • оптимизирована настройка пресетов для парсинга
  • добавлен модуль для тестирования правил парсинга

 Страница скачивания (5 Мб): BatchURLScraper
Ищу сервис, который показывает исходящие ссылки с сайта
SiteAnalyzer ( https://site-analyzer.ru/ ) бесплатно просканирует любой сайт и покажет, помимо прочего, все исходящие ссылки.
BulkPageSpeed - Массовая проверка скорости загрузки страниц по Google PageSpeed
Romanov Roman #:

https://devaka.ru/articles/pagespeed-insights

На счет качества тех или иных оценок все давно в курсе.

Поэтому доверять оценкам Google PageSpeed или нет дело каждого, и если для вас это не играет никакой роли - можно просто пройти мимо...

BulkPageSpeed - Массовая проверка скорости загрузки страниц по Google PageSpeed
chillybang #:

Программа замечательная, слов нет. НО:

Наблюдение за скоростью загрузки страниц - это процесс постоянный. Соответственно, нуждающийся во временном компоненте и графическом изображении. То есть: необходимо наблюдать за страницами регулярно и, желательно, представлять результаты в виде диаграммы.

Эту задачу я, например, решаю с помощью импорта результатов опроса PageSpeed API в Google Sheets, передачей данных в Data Studio и отрисовки графика.

Было бы замечательно иметь такой функционал в программе. Будет абсолютно достаточно добавить две функции:

  • Планировщик сбора данных (каждый час, день, неделю). Причём было бы наверное даже прикольно стартовать программу для сбора данных в режиме без GUI
  • Автоматический экспорт результатов вместе с датой сбора данных в Google Sheets. В настройках надо будет указать данные на доступ в аккаунт Google и адрес Google Sheet, куда экспортировать.
И тогда получится полноценный автоматический мониторинг скорости загрузки с визуализацией данных. Круто?

Интересное предложение. Но пока слишком трудоемкое на данном этапе.

Позже встроим проверку скорости в SiteAnalyzer, возможно уже там дополним функционал проверки скорости загрузки страниц вашим предложением.

RuCaptcha - обсуждение, отзывы, предложения.
Давно пользуемся Рукапчей, в том числе используем ее в наших инструментах SiteAnalyzer и PositionMeter. Радует гуманный ценник и простое внедрение инструмента в программный код.
1... 131415161718192021 ...101
Всего: 1010