В метрике в Дополнительных настройках есть галочка - "Запрет отправки на индексацию страниц сайта" , если у вас она не стоит то робот так и нашел страницы.
https://yandex.ru/support/webmaster/yandex-indexing/webmaster-advice.xml
Вот эту ссылку покажите ему. И другу босса.
Ага, посчитайте сколько там таких же ссылок продано за 6 лет=) Совсем не помойка.
Проще сделать урл товара вида: сайт.ру/товар.html и размещать такие товары можно в любых категориях сколь угодно раз.
вы еще хостинг проверьте и валидность кода, может там собака зарыта=)
Miha Kuzmin (KMY), точно точно, с темы не соскакивай, я написал про роботов и title . Выше привел пруф где именно это и пишут создатели роботов. Так что все таки региональные роботы, ять... ;)
Где кто-то про сохраненку писал?
Я про коня в вакууме, давай уже расскажи свою историю.
https://yandex.ru/support/webmaster/recommendations/regionality.xml
Некоторые сайты устроены таким образом, что пользователю предоставляются разные версии сайта в зависимости от того, из какого региона (с какого IP-адреса) он зашел на сайт (региональные версии сайта). Например, если у вашей компании есть представительства в разных городах, то пользователю из Москвы может быть показана одна версия сайта, а пользователю из Хабаровска — другая. Но робот Яндекса выполнит очередной обход индексирования с IP-адреса одного конкретного региона, и поэтому ему будет предъявлена только одна из версий сайта ( часть содержимого не будет проиндексирована).
Робот приходит с самарским ip, вы отдаете ему заголовки для Самары и тд.
Региональные роботы видят свой title, он не мигает для поисковика.
Вот такая штука есть, угадайте от кого=) https://tech.yandex.ru/tomita/ и http://www.google.com/patents/US9424524
имея набор данных для обучения можно настроить нейросеть и....
У вас постраничный баден (про хостовый вы бы сказали? ). С толокой это вообще не связано.