easywind

Рейтинг
283
Регистрация
21.09.2009
Denis Igorevich:
Подскажите пожалуйста, что это значит по-русски?

Уточнили бы где написанно? В инструментах? Боту запрешено, сканировать сайт. Не отсканирует, не попадет в индекс.

Jaf4, читать здесь расшифровку одной из встреч.

В выдаче яши, попался сайт с ссылками на вирусы или в черном списке гугла. Вот и картинка :)

Спрашивал у геглеров специально. Сказали что нет за это санкций. Но делать только из спецсимволов титлы и описания не стоит :)

bigBuyer,

1. ПС понимают, что такое навигация. А категории, это ее составные части. Это не будет дубликатами.

2. Продвигать точно будете? Тогда используйте каноникалы, на основную рубрику "ведра". Вообще лучше закрыть от индексации, но не в роботс, а метатегами.

Hol1killer, лучше сделайте роботс и нормальный. По последним встречам, гуглебот если по роботс получает 404, может откладывать сканирование сайта.

Hol1killer:
Disallow:

только это? И больше ничего? ХЗ. Должен вообще игнорировать. Так как он спецификацию тогда нарушит.

comixhere:
оналогичный ресурс : ololo.fm у них не закрыты не в robots не в nofollow

При чем тут, чужой ресурс, если речь о Вашем? Что явно увидел, то сказал. Заказывайте аудит сайта, если этого не достаточно.

на форуме полно исполнителей, которые смогут сделать.

DOMENOFF:
Я встречaл в выдaче стрaницы, которые зaпрещены в роботсе. В снипете пишется "Описание веб-страницы недоступно из-за ограничений в файле robots.txt", но в выдaче онa есть.

Вы просто не понимаете, как это работает. Обсуждалось неоднократно.

---------- Добавлено 17.07.2014 в 18:11 ----------

Hol1killer:
А если в robots.txt - User-agent: * - не было указано, то он будет смотреть все инструкции которые шли после него ?

Не совсем, понятен вопрос. Если робот определенной системы, не найдет для себя раздела, то будет использовать основной с *

comixhere:
какой сервис посоветуете?

http://www.google.com/safebrowsing/diagnostic?site=5mp3.org

Попробуйте мусор из "У нас нашли mp3" закрыть в нофоллоу.

Всего: 3692