Уточнили бы где написанно? В инструментах? Боту запрешено, сканировать сайт. Не отсканирует, не попадет в индекс.
Jaf4, читать здесь расшифровку одной из встреч.
В выдаче яши, попался сайт с ссылками на вирусы или в черном списке гугла. Вот и картинка :)
Спрашивал у геглеров специально. Сказали что нет за это санкций. Но делать только из спецсимволов титлы и описания не стоит :)
bigBuyer,
1. ПС понимают, что такое навигация. А категории, это ее составные части. Это не будет дубликатами.
2. Продвигать точно будете? Тогда используйте каноникалы, на основную рубрику "ведра". Вообще лучше закрыть от индексации, но не в роботс, а метатегами.
Hol1killer, лучше сделайте роботс и нормальный. По последним встречам, гуглебот если по роботс получает 404, может откладывать сканирование сайта.
только это? И больше ничего? ХЗ. Должен вообще игнорировать. Так как он спецификацию тогда нарушит.
При чем тут, чужой ресурс, если речь о Вашем? Что явно увидел, то сказал. Заказывайте аудит сайта, если этого не достаточно.
на форуме полно исполнителей, которые смогут сделать.
Вы просто не понимаете, как это работает. Обсуждалось неоднократно.---------- Добавлено 17.07.2014 в 18:11 ----------
Не совсем, понятен вопрос. Если робот определенной системы, не найдет для себя раздела, то будет использовать основной с *
http://www.google.com/safebrowsing/diagnostic?site=5mp3.org
Попробуйте мусор из "У нас нашли mp3" закрыть в нофоллоу.