Простите, а можно пример?
Спасибо! Не понял насчет "неосновного контента" речь же за html теги? Контент как раз основной, но его мало по отношению к коду.
Теги же не закрыть для робота )
картинки имеют rel="nofollow"
но весь остальной блок открыт и уж тем более открыт H1 "Женские сумки"
в robots ничего криминального не запрещено вроде
User-agent: Googlebot
#по умолчанию
Disallow: /wishlist
Disallow: /user
Disallow: /away
#убиваем все старые URL карточек товаров
Disallow: /shop-item*
Disallow: /brand/*
Disallow: /market/*
Disallow: /sale$
#функционал создания образов, луков, поиск и т.д.
Disallow: /profile/
Disallow: /create-look
Disallow: /search/
#закрываем мусор
Disallow: *?*
Disallow: *&*
Disallow: *=*
Disallow: *;*
#закрываем все неоптимизированные фильтры
Disallow: */f/*
#открываем общие бренды (мужские, женские и дети)
Allow: */f/*brands*
Allow: */f/*markets*
Allow: */f/*discoun*
Allow: */f/*materials*
Allow: */f/*colors*
#открываем метки (вырезаем через Вебмастер)
Allow: /*gclid*
Allow: /*yclid*
Allow: /*ymclid*
Allow: /*_openstat*
Allow: /*frommarket*
Allow: /*utm*
Allow: /*utm_source*
Allow: /*utm_medium*
Allow: /*utm_campaign*
Allow: /*utm_content*
Allow: /*utm_term*
#открываем ajax
Disallow: /api*
#открываем js и css
Allow: /*.js
Allow: /*.css
Allow: /*.jpg
Если не сложно, не могли бы вы попонятней разъяснить вашу позицию по этому вопросу, спасибо! Специально написал в ветку "для новичков" )
Спасибо!
Большое количество 404 ведь может сильно навредить в общем? Разве не так?
Спасибо большое!---------- Добавлено 26.06.2017 в 09:51 ----------Большой объем - это 4 млн и не все из них качественные
Спасибо большое!
Спасибо! Но к сожалению xtool пишет "Страница не проиндексирована поисковыми системами или невозможно проверить", но в то же время по site:****** в гугле видно три страницы и rds bar показывает три страницы
Еще один вопрос. Как вы думаете, по какой причине раньше в сниппете было 5-6 быстрых ссылок, при чем 4 вполне вменяемые, а теперь Гугл сократил их до 1-3?
Подскажите, а какими принципами при этом руководствуется гугл?