Selend, ошибки ДНС можно проверит здесь intodns.com запросите хостера если есть с этим проблемы.
она заголовками типа <h.. не выделена случайно?
пруф про сайт думы снова показать?---------- Добавлено 26.01.2014 в 03:22 ----------
для каждого бота, если команды отличаются нужна отдельная группа. Только сайтмап может идти без группы.
Selend, в ВМТ через "посмотреть как гуглебот" можно проверить доступность.
так правильно. У Вас хост параметр пустой строкой отделен был.
User-agent: *
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /admin
Disallow: /catalog
Disallow: /download
Disallow: /system
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=
User-agent: Yandex
Clean-param: tracking
Host: мой сайт.ру
User-agent: Googlebot
Sitemap: мой сайт.ру/sitemap.xml
в гугле адреса и гугле места добавте сайт. Можно еще сделать +страницу в г+
не совсем.
Параметр host понимает только яндекс и он не должен быть отделен пустой строкой от блока яндекс.бота.
Файл sitemap.xml должен один раз быть прописан и отдельным блоком.
показывайте сайт. Тогда и будет пример.
если ссылочное никакой ценности не имеет то да. Вам только наращивать(не покупать) ее стоит.
anebilitsa, http://optimizatorsha.ru/master-classes/smyslovaya-unikalnost/
