Paywall, я уже писал выше.
Пусть покупают подписку.
Я думаю, что это бесплатный контент, раз уж там характеристика изделий.
Ну как же, Макс, ведь,
Михаил Сливинский, ныне руководитель отдела Я.Вебмастера, частный участник IT конференций, посвященных поиску, главный абмассадор Яндекса 😉
Тогда начните с капчи. Возможно она решит проблему.
Но если процесс парсинга контролируется, то это не поможет, в любом случае данные заберут.
Если это целевой сбор, то капчу могут ввести вручную, впрочем и для автоматических режимов есть методика использования антикапч сервисов.
Я бы начал с отсекания доступа для ненужных ASN.
Всё зависит:
1) От потенциала сайта
2) От используемого ресурса
Если потенциал есть, можно браться, но надо понимать куда двигаться и для чего.
А зачем? На инфо сайтах Главная почти не даёт трафика, если это не брендовая история.
Надо не на любые, иначе из пушки по воробьям - проверяете видимость запросного индекса, снимаете позиции, сортируете по приоритетам и распределяете добавочный трафик по предполагаемым точкам роста.
Всему своё время: шустрить, банчить, ворчать 😊
Ностальгические воспоминания - это неплохо 😉
Картинки и прочее не качает. По сути, не конкурент, но все же паразитирует на части моего контента.
IP постоянно разные, не поленился записать и привожу те, которые программа использовала вчера, 01 октября:
Вам бурж трафик нужен? Парсят с зарубежный проксей.
Баньте подсетями и тогда ресурс быстро исчерпается.
Попробуйте, как вариант вполне может быть. Но если это целевой сбор, то капчу можно ввести в том числе и через антикапч сервис.
В общем, башковитые ребята конечны были, Людкевич насколько я помню в Текарте в боевой упряжке был.
Но семантика как тренд с глубокой экспертизой появились позднее, насколько я помню с появления Пастуховских баз.
А в договорах тогда активно муссировались схемы по кол-ву запросов: 5 вч и 45 нч, 5 вч и 25 нч. Менеджеры очень любили нарезать такие варианты на тарифы.
В регионалке тогда было по 5 запросов за 1500-3000 рублей :) А клиенты норовили сбить цену и говорили - нам вот один запрос основной нужен, а остальные не нужны, договоримся за 50% от суммы? :)
А "нет" почему?
Это всегда было - картинки, тексты, баннеры, прочая орг. рутина. Но обязательных требований по SEO это касалось мало.
Я даже помню, как мы продвигали главные страницы, которые просто были входными страницами на флэше. Подсовывали текст, title-ы, description-ы и дальше ссылки, ссылки, ссылки.
Помню носились с этими теориями "трастового окна", рубились на тему какая должна быть процентовка в отношении анкорное/безанкорное, словом, забавное было время 😎
Угу. Особенно когда оказывалось, что большая ссылок уже вылетала из индекса 😊
Апы ждали, текстовые, Тиц-овые :) Трава зеленее, деревья повыше.
Ну, до 2006 года меня в SEO не было, но с этого периода, вся внутренняя оптимизация делалось в течение первой недели, дальше годами брались деньги за циклические изыскания с ссылочной массовой в SAPE. Из месяца в месяц примерно одно и тоже.
Большая часть времени уходила - на то, чтобы проверить индексацию, траст, снять ненужное, отследить и купить нужное.
Больших объёмов семантики тогда не было, как такого контент-маркетинга не было, вылизыванием технички особо никто не морочился. Ранжируется, растёт? - дожимали ссылками.