robots.txt

4
На сайте с 16.08.2016
Offline
18
916

Добрый вечер, форумчане.

Подскажите по файлу robots.txt

- Вообщем google adwords - говорит не все страницы оптимизированы для мобильных устройств.

- Когда я проверяю страницы в search console - робот её видит без скриптов, css и других - ну и в настройках просит открыть папки к JS и тд.

- А по рекомендации и настройке robots.txt - надо закрыть все папки к сайту "Движок Simpla CMS"

Вот так он выглядит:

User-agent: *

Disallow: /sections/404

Disallow: /simpla/
Disallow: /order/
Disallow: /user/
Disallow: /js/
Disallow: /captcha/
Disallow: /Smarty/
Disallow: /design/
Disallow: /api/
Disallow: /compiled/
Disallow: /cart/
Disallow: /resize/
Disallow: /password.php

То есть проблема в том, что search console - просит открыть папки к шаблону /design/, а по рекомендациям robots.txt - надо закрывать все эти папки. Так какой же вариант правильный?

---------- Добавлено 03.11.2016 в 23:38 ----------

И что будет если я просто удалю все содержимое папки robots.txt - не навредит ли это сайту?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий