А у него траф не из-за этого.
Вы sitemap используйте.
А rel=canonical не надо использовать вообще (он для выбора дубля, на который надо сослаться из выдачи).
Лучше следить чтобы все ваши страницы были доступны по единственному урлу. Это экономит ограниченный траф бота... он не будет тратиться на дубли.
По шаблону генерить можно, гугл разрешал (даже если вы меняете 4 слова).
Но вы должны думать не об обязательности заполнения меты, а об информативности того, что получится в выдаче // а вот это вам и не важно, если не задумываетесь об условиях показа меты. А она иногда настолько неудачна, что для выдачи оказываются лучше сниипеты без слов запроса https://www.google.ru/search?q=site%3Asearchengines.guru+%D0%B4%D0%B5%D1%81%D0%BA%D1%80%D0%B8%D0%BF%D1%88%D0%BD
https://www.google.ru/search?q=inurl%3Asearchengines.guru%2Fshowthread.php%3Ft%3D979752+%D0%B4%D0%B5%D1%81%D0%BA%D1%80%D0%B8%D0%BF%D1%88%D0%BD
Осталось воспроизвести посмертный список всех, на кого ты работал.
Это доступ к сайту по тому же HTTP (с IP вместо домена).
Сайтов-по-IP не бывает...
Ну что-нибудь типа:
А можно было и переклеить на другой домен с “тем же” сайтом.
Зеркальщику эти наведённые колмановскими убеждения паствы не интересны.
А сайтов без доменов для ботов не бывает
Это такой вчерашний юмор.
Adblock Plus — давняя покупка Гугла, блокирующая лишь 16,4% от общего числа рекламы ... в основном конкурентов наверное.
Так давеча яндексоиды громко плакались, что при ампутации Директа их выдачу перекосо¨било.
Так что сами оказались заинтересованы один раз сделать HTML/CSS и не трогать.
А Тиль Файда тогда им неспешно чего-то вещал про интересы пользователей и бла-бла... да некому подписки отредактировать.
Верующий дебил из мекки бота щукина.
Олигарх Волож только в чужое гражданство вкладывается... и боится в сакционный список попасть — не меньше, чем лет 10 назад признаться в кривости зеркальщика. Работает он “не совсем так”, как ... это допустимо разъяснить всем этим гнусным спамерюгам. Мотив экспериментатора: Ненавижу криворуких разработчиков бота склейки яндекса. Сколько они вреда мне принесли. Сколько заброшенных ЯКов склейкой своровано...
C Host тоже не всё однозначно /ru/forum/158717
А кроме этой нестандартности... ещё и национальные особенности ботов: переход / непереход по 301 при GET /robots.txt
Как бы есть совокупность признаков... а уж по какому алгоритму / с какой вероятностью будет действовать бот...
ps У искалок ранжирующих систем есть чисто экономическая проблема: минимизация себестоимости поиска / затрат на железо // приходится например много дублей фильтровать // алгоритм этой фильтрации — тоже требует ресурсов, поэтому вряд ли он будет идеально точно работающим, да и не надо это создателям. А с зеркалами почему должно быть иначе? А с директом...
Ну дорвейщики / вирусописатели ещё и не так себя ведут. Зачем?
Вам не понравился такой способ загребания бабла?
Дальше сей способ будет вынужден умнеть... ибо бабло!
Вообще пользователей блокировщиков обязательно надо переделать под свои нужды:
Если кто ещё не понял, в т.н. информационных контекстах ♠ некие аналоги бабла делаются на различиях и противостояниях.
