Ваш совет помог. Спасибо.
Похожая проблема. Новый сайт изначально отдавал заголовок "x-robots-tag: noarchive". В поиск сайт вошёл с ссылками на сохранённые копии.
Есть какой то костыль чтобы решить эту проблему?
1. Да. В роботс есть параметр host, как зачем
Яндекс игнорирует этот параметр. Уже давно. Можете его удалить.
У меня все картинки на сайтах в jpg. В гуле показывает 100 из 100, в яндексе - 5 из 5.
Для успокоения совести можете сделать оптимизацию картинок и заняться чем то более плодотворным.
Попробуйте уменьшить количество url до 5 тыс. Иногда помогает.
Смысл как раз в мультидомене. Иногда хочется для части доменов изменить настройки.
Но можно обойтись и без этого.
О каком Антиботе речь и чем он поможет в данном конкретном случае?
Mik Foxi, я в логах сервера это видел. Запрос к странице сайта, host мой, ip google-proxy, user-agent яндексбота, реальный ip тоже яндексбота. Примерно с месяц назад было много таких запросов. Похоже на попытку прямого захода через прокси. Нафига это нужно яндексу я без понятия.
Через google-proxy может быть и настоящий яндекс-бот. У меня там реальный ip яндекса светился. Но я всё равно блокирую. Ибо нефик.
