Форум Практика оптимизации Любые вопросы от новичков по оптимизации

сайтс таким robots.txt будет индексироваться?

N
На сайте с 10.01.2014
Offline
50
nospamno
639

подскажите как расшифровать данный robots.txt - что запрещает, что разрешает?

User-agent: *

Disallow: /*/

Sitemap: http://мойсайт.ru/sitemap

User-Agent: Yandex

Disallow: /*/

Sitemap: http://мойсайт.ru/sitemap

Host: мойсайт.ru

Гэмблинг ПП №1 (http://vulkanpartner.com?r=nEcjykHI) / Гэмблинг ПП №2 (http://gambling-partners.com/ref_partner/12346/) / Туристическая ПП (http://www.travelpayouts.com/?marker=77133.serch&locale=ru)
Alex Klo
На сайте с 15.06.2006
Offline
304
Alex Klo
#1

через Я.вебмастер (Инструменты - Анализ robots.txt) не пробовали?

Проверка и мониторинг позиций сайта ( http://www.topvisor.ru/?inv=1520 ) Продвигаю сайты http://climat-nw.ru/conditioner-installation/ http://www.aircom-spb.ru/service/montaj/
Brovik
На сайте с 05.02.2012
Offline
102
Brovik
#2

он закрывает весь сайт для индексации

диагностика, снятие порчи, аудиты - Brovik_1 (скайп)
Svictor
На сайте с 16.01.2007
Offline
99
Svictor
#3

В данном случае

Disallow: /*/

Закрывает только папки на сайте или категории.

Но не закрывает его полностью, т.е доступны index.php и другие файлы сайта

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий