Screaming Frog обновил SEO Spider до версии 14.0

Команда Screaming Frog сообщила об обновлении SEO Spider до версии 14.0.  Среди основных изменений – тёмный режим, экспорт данных в Google Таблицы, а также извлечение и хранение HTTP-заголовков и файлов cookie.

  • Тёмный режим 

Чтобы включить этот режим, нужно нажать Config > User Interface > Theme > Dark. 

Как видно на скриншоте выше, разработчики также улучшили другие элементы стиля и диаграммы.

  • Экспорт данных в Google Таблицы

Ещё одним нововведением стала возможность экспорта данных в Google Таблицы:


Пользователи могут добавить несколько аккаунтов Google и быстро экспортировать данные о сканированиях в любой из них. Полученные результаты появятся в папке "Screaming Frog SEO Spider" на Google Диске и будут доступны через Таблицы.

  • Заголовки HTTP

SEO Spider теперь также позволяет хранить, просматривать и запрашивать HTTP-заголовки. Это может быть полезно при анализе различных сценариев, которые не охватываются извлечением заголовков по умолчанию, таких как сведения о состоянии кеширования, set-cookie, content-language и др.

Чтобы извлекать эти данные, нужно открыть Config > Spider > Extraction и выбрать «HTTP Headers» . Заголовки запроса и ответа будут показаны полностью на вкладке «HTTP Headers».

  • Cookies

Инструмент теперь также позволяет сохранять файлы cookie. Для их извлечения нужно пройти через Config > Spider > Extraction, а затем выбрать «Cookies». Они будут показаны на вкладке «Cookies».


Чтобы получить точное представление о тех файлах cookie, которые загружаются с использованием JavaScript или пиксельных тегов, нужно будет перейти в режим JavaScript-рендеринга

SEO Spider будет собирать такие данные, как имя файла cookie, значение, домен (first-party или third-party), а также атрибуты, такие как secure или HttpOnly.

Эти данные затем можно будет анализировать в агрегированном виде. Например, для GDPR.


  • Агрегированная структура сайта

SEO Spider теперь отображает количество URL-адресов, обнаруженных в каждом каталоге, в дереве каталогов (к которому можно получить доступ через значок дерева рядом с кнопкой «Export» на верхних вкладках).

Это помогает лучше понимать размер и архитектуру сайта.


  • Новые параметры конфигурации

Разработчики также добавили два новых параметра конфигурации:  «Ignore Non-Indexable URLs for On-Page Filters» (игнорировать неиндексируемые URL-адреса для фильтров на странице) и «Ignore Paginated URLs for Duplicate Filters» (игнорировать URL-адреса с разбивкой на страницы для повторяющихся фильтров).

Оба они включены по умолчанию при переходе в меню Config > Spider > Advanced и означают, что неиндексируемые страницы не будут помечены в on-page фильтрах для тайтлов, метаописаний и заголовков.


Со всеми другими изменениями в новой версии SEO Spider можно ознакомиться в блоге Screaming Frog.

preview Google: изменение базовой инфраструктуры сайта может влиять на частоту его сканирования

Google: изменение базовой инфраструктуры сайта может влиять на частоту его сканирования

Поисковик попытается приспособиться к новым условиям
preview Новая волна блокировок в Google Мой бизнес

Новая волна блокировок в Google Мой бизнес

Эта тема активно обсуждается с конца прошлой недели
preview Google вернул данные по ручным санкциям в Search Console

Google вернул данные по ручным санкциям в Search Console

Специалисты заметили их пропажу на прошлой неделе
preview Google начал тестировать показ значка “Гарантия Google” в профилях компаний

Google начал тестировать показ значка “Гарантия Google” в профилях компаний

И в блоке локальной выдачи
preview Старт нового рейтинга зарплат Serpstat

Старт нового рейтинга зарплат Serpstat

Как коронакризис повлиял на заработок интернет-маркетологов в 2020
preview Google перенёс блоги для вебмастеров на новый сайт

Google перенёс блоги для вебмастеров на новый сайт

Теперь найти нужную информацию будет проще