Небольшой вопрос про robots.txt

F7
На сайте с 02.06.2011
Offline
0
558

Для тех кто в теме думаю несложно будет ответить - запрещена у меня на сайте индексация роботами или нет?

Просто внезапно потерялся мой разработчик а нужно срочно узнать.

вот файл

User-agent: *

Allow: /forum/

Allow: /gallery/foto_peyntbolnyh_ploschadok.html

Allow: /gallery/foto_peyntbolnyh_ploschadok/page_2.html

Allow: /gallery/foto_nashih_gostey.html

Allow: /gallery/foto_nashih_gostey/page_2.html

Allow: /gallery/foto_territorii_kluba.html

Allow: /gallery/foto_territorii_kluba/page_2.html

Allow: /gallery/vashi_foto.html

Allow: /gallery/vashi_foto/page_2.html

Allow: /gallery/vashi_foto/page_3.html

Allow: /gallery/arhiv_foto.html

Allow: /gallery/arhiv_foto/page_2.html

Allow: /files/gallery/*

Disallow: /search

Disallow: /gallery/

Disallow: /userpanel/

Disallow: /articles/

Disallow: /shop_old/

Disallow: /shop/

Disallow: /dk?

Disallow: /news_pi/

Disallow: /ucp.php

Disallow: /sitemap.html

Изза звездочки сверху возле User-agent: у меня сложилось впечатление что запрещено все к индексированию. Так это?

B
На сайте с 02.05.2007
Offline
240
#1

коллега, я тоже Янлексом не пользуюсь

но гугл вот сослался

http://help.yandex.ru/webmaster/?id=996567

F7
На сайте с 02.06.2011
Offline
0
#2

Дядя Балуев, если бы я могла сама разобраться, я бы не приставала с вопросами на специализированном форуме.

Я фермер а не программист блин

мне только скажите - индексируется или нет. все сопсно

пожалуйста

Systproject
На сайте с 19.03.2008
Offline
100
#3

Индексируется то что разрешено.

* в данном случае указывает на то, что правила следующие под ним предназначены для всех роботов.

Здесь можно проверить разрешена страница в robots или нет http://webmaster.yandex.ru/robots.xml

F7
На сайте с 02.06.2011
Offline
0
#4
Systproject:
Индексируется то что разрешено.

* в данном случае указывает на то, что правила следующие под ним предназначены для всех роботов.

Спасибо!:p

maxbet
На сайте с 26.04.2010
Offline
13
#5
Figaro70:
Для тех кто в теме думаю несложно будет ответить - запрещена у меня на сайте индексация роботами или нет?
Просто внезапно потерялся мой разработчик а нужно срочно узнать.

вот файл

User-agent: *
Disallow: /search
Disallow: /gallery/
Disallow: /userpanel/
Disallow: /articles/
Disallow: /shop_old/
Disallow: /shop/
Disallow: /dk?
Disallow: /news_pi/
Disallow: /ucp.php
Disallow: /sitemap.html

Изза звездочки сверху возле User-agent: у меня сложилось впечатление что запрещено все к индексированию. Так это?

Звездочка вверху означает типа для всех поисковиков, все что в disallow - это запрещено к индексации, а все что в allow, соответственно разрешено

-Анализ сайта, проверка тиц и pr (http://pr-cy.ws)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий