спасибо!
Продолжим.. для Google:
Проверить результат обхода страницы, после обработки файлом robots.tx можно, вписав список url в форму проверки.
Google WMT -> Левая панель -> Сканирование -> Заблокированные URL
либо:
https://www.google.com/webmasters/tools/robots-analysis?hl=ru&siteUrl=
Чтобы всем облегчить жизнь - можно в первое сообщение топика прикрепить.. если Cell одобрит..---------- Добавлено 16.04.2014 в 21:12 ----------
как считаете?
при каком разрешении экрана?---------- Добавлено 16.04.2014 в 16:52 ----------
http://htmlbook.ru/faq/kak-ubrat-polosy-prokrutki
50.000 тыс урлов. либо 10мб. (можно сжать gzip)
На здоровье🚬
clean-param - для Яндекса, Google проигнорирует.
Чтобы не гадать, в Вебмастере яндекс есть проверка robots.txt и в google/webmasters тоже.. Загружаете robots и вписываете несколько url для примера, и сервис показывает результат.
http://webmaster.yandex.ru/robots.xml#results
Юнисендер попробуйте - http://www.unisender.com/ru/
ну.. Супер!
когда нажимаешь на изменить страницу, там нет такого раздела?
подключенные модули