правильность robot.txt

12
Marinka
На сайте с 21.04.2007
Offline
125
#11
semenov:
Это как?...........

Сорри, ошиблась :)

semenov:
Цитата:
Сообщение от Textmaster2 Посмотреть сообщение
И тот и тот правильный
Да ну?...........

Почему то подумала, что Вы в этом сообщении оспариваете одно из решений указанных ТС. Пятниццо, торможу )

SeoHammer (http://www.seohammer.ru/?partnerid=123870) - продвижение сайтов в ТОП. Попробуй нарубить в Kappusta.Ru (http://kappusta.ru/?r=B0CC924593324D4A99EF8016BF16656E)! Поисковый и коммерческий аудиты, цена по договоренности.
Z
На сайте с 01.06.2008
Offline
182
#12
Marinka:
Пятниццо, торможу )

особенно 13-го - это простительно ;)

а чёрт уже 14-е....

S
На сайте с 28.10.2005
Offline
318
#13
Marinka:

Почему то подумала, что Вы в этом сообщении оспариваете одно из решений указанных ТС.

Правильно подумали :D

PB
На сайте с 08.03.2009
Offline
5
#14

как мне запретить к индексации весь сайт, кроме каталогов pack1 и pack2 ? Не только от яндекса,а от всех поисковых систем.

Продам две ссылки PR4,тИЦ10,DMOZ. Женский ресурс. Пишу обзор ваших сайтов себе на сайт, с ссылкой на ваш сайт.
inseonight
На сайте с 10.10.2008
Offline
170
#15

Следующий простой файл robots.txt запрещает индексацию всех страниц сайта всем роботам, кроме робота Рамблера, которому, наоборот, разрешена индексация всех страниц сайта.

# Инструкции для всех роботов

User-agent: *

Disallow: /

# Инструкции для робота Рамблера

User-agent: StackRambler

Disallow:

Занимаюсь разработкой и продвижением интернет магазинов. Внедряю аналитику и консультирую по seo.
Цахес
На сайте с 15.03.2007
Offline
205
#16
PunBB:
как мне запретить к индексации весь сайт, кроме каталогов pack1 и pack2 ? Не только от яндекса,а от всех поисковых систем.

Для ПС поддерживающих директиву Allow:

User-agent: имя робота
Allow: /pack1/
Allow: /pack2/
Disallow: /

Для всех остальных придётся перечислять все папки в Disallow кроме нужных pack1, pack2.

- Хорошие и плохие тексты для ваших сайтов (http://www.textsale.ru/team57397.html). - Удаленная работа. Вакансия копирайтера/рерайтера. (http://advego.ru/6myq8sgvKk) - Быстрое составление семантического ядра (https://topvisor.ru/?inv=39380).
_mihey
На сайте с 15.07.2005
Offline
199
#17

Можете еще в meta прописать там, где не положено в индекс :

<meta name="Robots" content="noindex,nofollow">

А то через раз роботс сейчас кушается через раз - не могу страницы для печати выгнать им из индекса долгое время.

Куплю размещение статей с трансляцией в Я.Новости (/ru/forum/833079)
S
На сайте с 28.10.2005
Offline
318
#18
_mihey:
...не могу страницы для печати выгнать им из индекса долгое время.

Уверены, что правильно составлен? (;

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий