ZoomY: До 50к урлов на файл ПС обрабатывают спокойно. Если у вас больше - делайте xml-карту для каждого раздела и указывайте пути к ним в родительском xml.
Должно выглядеть примерно так: User-agent: Yandex Disallow: Clean-param: print /catalog/
Пускай гуру поправят
clean-param - для Яндекса, Google проигнорирует.
Чтобы не гадать, в Вебмастере яндекс есть проверка robots.txt и в google/webmasters тоже.. Загружаете robots и вписываете несколько url для примера, и сервис показывает результат.
Дописал в первое сообщение.
спасибо!
Продолжим.. для Google:
Проверить результат обхода страницы, после обработки файлом robots.tx можно, вписав список url в форму проверки.
Google WMT -> Левая панель -> Сканирование -> Заблокированные URL
либо:
https://www.google.com/webmasters/tools/robots-analysis?hl=ru&siteUrl=
Да, спасибо, все гениальное просто ☝ закрывается с помощью Disallow: /*print=
Чтобы всем облегчить жизнь - можно в первое сообщение топика прикрепить.. если Cell одобрит..
---------- Добавлено 16.04.2014 в 21:12 ----------
Вопросы по файлу robots.txt
как считаете?
при каком разрешении экрана?
---------- Добавлено 16.04.2014 в 16:52 ----------
На сайте появляется горизонтальная полоса. ХЗ какой блок ее дает.
Подскажите как вычислить откуда она берется?
http://htmlbook.ru/faq/kak-ubrat-polosy-prokrutki
До 50к урлов на файл ПС обрабатывают спокойно.
Если у вас больше - делайте xml-карту для каждого раздела и указывайте пути к ним в родительском xml.
50.000 тыс урлов. либо 10мб. (можно сжать gzip)
Да, спасибо, все гениальное просто ☝ закрывается с помощью Disallow: /*print=
На здоровье🚬
Воспользуйтесь директивой Clean-param
http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml#clean-param
Должно выглядеть примерно так:
User-agent: Yandex
Disallow:
Clean-param: print /catalog/
Пускай гуру поправят
clean-param - для Яндекса, Google проигнорирует.
Чтобы не гадать, в Вебмастере яндекс есть проверка robots.txt и в google/webmasters тоже.. Загружаете robots и вписываете несколько url для примера, и сервис показывает результат.
http://webmaster.yandex.ru/robots.xml#results
Юнисендер попробуйте - http://www.unisender.com/ru/
bulatbulat48 Сейчас проделал все заново, чтобы показать вам и все появилось)
Чудеса)) Вопрос думаю закрыт) Спасибо!
ну.. Супер!
когда нажимаешь на изменить страницу, там нет такого раздела?
подключенные модули