А у Яндекса и нет конкретной задачи предоставлять SEO специалистам полезную информацию, они вещают информацию для широкого круга пользователей и вебмастеров. Там уж кому как.
Я так и думал.
Конечно, то, что предполагается для бесплатного ознакомления, покупать не будут, да и в целом, довольно быстро вырастут отказы.
Paywall, я уже писал выше.
Пусть покупают подписку.
Я думаю, что это бесплатный контент, раз уж там характеристика изделий.
Ну как же, Макс, ведь,
Михаил Сливинский, ныне руководитель отдела Я.Вебмастера, частный участник IT конференций, посвященных поиску, главный абмассадор Яндекса 😉
Тогда начните с капчи. Возможно она решит проблему.
Но если процесс парсинга контролируется, то это не поможет, в любом случае данные заберут.
Если это целевой сбор, то капчу могут ввести вручную, впрочем и для автоматических режимов есть методика использования антикапч сервисов.
Я бы начал с отсекания доступа для ненужных ASN.
Всё зависит:
1) От потенциала сайта
2) От используемого ресурса
Если потенциал есть, можно браться, но надо понимать куда двигаться и для чего.
А зачем? На инфо сайтах Главная почти не даёт трафика, если это не брендовая история.
Надо не на любые, иначе из пушки по воробьям - проверяете видимость запросного индекса, снимаете позиции, сортируете по приоритетам и распределяете добавочный трафик по предполагаемым точкам роста.
Всему своё время: шустрить, банчить, ворчать 😊
Ностальгические воспоминания - это неплохо 😉
Картинки и прочее не качает. По сути, не конкурент, но все же паразитирует на части моего контента.
IP постоянно разные, не поленился записать и привожу те, которые программа использовала вчера, 01 октября:
Вам бурж трафик нужен? Парсят с зарубежный проксей.
Баньте подсетями и тогда ресурс быстро исчерпается.
Попробуйте, как вариант вполне может быть. Но если это целевой сбор, то капчу можно ввести в том числе и через антикапч сервис.
В общем, башковитые ребята конечны были, Людкевич насколько я помню в Текарте в боевой упряжке был.
Но семантика как тренд с глубокой экспертизой появились позднее, насколько я помню с появления Пастуховских баз.
А в договорах тогда активно муссировались схемы по кол-ву запросов: 5 вч и 45 нч, 5 вч и 25 нч. Менеджеры очень любили нарезать такие варианты на тарифы.
В регионалке тогда было по 5 запросов за 1500-3000 рублей :) А клиенты норовили сбить цену и говорили - нам вот один запрос основной нужен, а остальные не нужны, договоримся за 50% от суммы? :)