делать все что уместно для сайта. В первую очередь, я бы поработал с самыми популярными разделами и товарами(страницы).
портяночные тексты, перестал ценить гугл в магазинах наверно :)
каталоги для гугла, создают только ссылочный шум и ничего более.
iSeller, российские 70 лимонов пользователей, это 7% от мирового трафика. Не будет сравнивать яндекс с гуглом? Это просто не уместно :)---------- Добавлено 18.02.2014 в 19:19 ----------
хотите сказать, что гугл их не понимает? :) Да на любую страницу поставьте 404 ошибку и она вылетит из индекса.
Рекомендации по файлу robots.txt выдавались при царе горохе, когда не было объемов информации больше терабайта на сайтах. Сейчас все изменилось.
И гугл также изменил стратегию по использованию и хранению своей информации.
Почему появляется надпись "страница закрыта в файле robots.txt", да потому, что они ссылки хранят отдельно(скорее всего).
Не хотите видеть эту надпись? Используйте метатеги в коде сраниц.
<meta name="googlebot" content="noindex">
и откройте ее в файле robots.txt, чтобы бот ее смог просканировать и прочитать метатег.
И вся проблема будет решена. Не будет в выдаче, ни страницы, ни урла, ни надписи.
При чем тут, есть у меня сайты или нет? Пример запросов указал же? Нет в индексе страниц кроме урлов? Нет.
Я это, никогда не скрывал.
в 26 сообщении, Вы про роботс писали, не так ли? Давайте так лучше сделаем. Я убедил, что файл робот гугл соблюдает? Или опять насчет опыта будете говорить?
У меня нет вообще сайтов. Но как правильно пользоваться файлом роботс, я и без них знаю.
на каком?
а как это делается сейчас у Вас?
у гугла есть форум для вебмастеров. Они регулярно проводят видеовстречи и многое другое. Если они не помогли лично Вам, то это не значит, что они никем никого не считают. Считают.
