Вот чего-чего, а сервисов подобного рода как грязи. Не 100% идентичных, но вполне себе рабочих и полезных.
https://www.bing.com/toolbox/keywords
https://keywordtool.io/
https://neilpatel.com/ubersuggest/
https://www.wordtracker.com/
https://kwfinder.com/
https://ru.semrush.com/features/keyword-research/
https://www.wordstream.com/keywords
https://serpstat.com/keyword-research/
https://seranking.com/keyword-suggestion-tool.html
https://keywordkeg.com/
Полезно почитать https://backlinko.com/keyword-research
Есть вагон разрешений на составе устройств. Так что не у всех первый экран одинаков, не так ли? Не у всех же iMac 28” и разрешение 8к :)
А есть и сайты об одну строку текста на весь экран, с академическим дизайном. Им, если они тормозят, уже ничто не поможет :)
Как вариант решения - все некритичные медийные блоки (реклама, Картинки, iframe) размещенные за пределами первого экрана, грузить через вариации lazyload скриптов.
Попробуйте конструкции запросов типа inurl:urlpart site:site.ru или intext:someword site:site.ru - это даст дополнительные страницы
Протестите на aseo.tech - увидите, что можно добиться руками или автоматикой.
pr-cy.ru
similarweb.com
semrush.com
serpstat.ru
Бесплатный анализ - можно попробовать посмотреть
Для подбора в бурже
есть https://ubersuggest.io
достаточно вменяемый
есть https://keywordtool.io/
тоже полезен
Русские кеи там подбирать не пробовал и смысла не вижу. Вордстата с Буквариксом вполне достаточно, через Кейколлектор опять же.
Собрать, сделать тестовую кампанию в Google Ads, покрутить неделю, посмотреть показы, выбросить шлак.
Явное непонимание, как работают парсеры подобного рода (что NetPeak, что Screaming Frog, что Xenu).
99% времени уходит на выкачивание страниц и выбор ссылок с этих страниц для остроение очереди далее скачиваемых страниц - вот тут есть потери времени, т.к. логично делается проверка на уникальные адреса в очереди, чтобы по 10 раз один и тот же URL не скачивать - эти процессы на больших объемах затратны.
Все остальное извлекаемое - все те параметры, на обработке которых Вы думаете "съэкономить" - это статистически незначимые затраты времени.
Так что вопрос в принципе бессмысленный. Будучи выкаченной на компьютер, страница парсится почти моментально.
Это не боты. Это поиск по картинкам, в котором при уточняющих кликах к запросу автоматом плюсуется альт-текст, и эти запросы попадают в статистику.
Недавно общал саппорт Директа, сознались, сказали, что разработчики уже работают над переделкой схемы уточняющего поиска.
Апплодисменты, самореализовался. Дальше первых строк поста не осилил? Да, дату не посмотрел. Но по сути написал. А Вы?