Закрыть просмотр бэклинков с сайта

12
xzorro
На сайте с 20.04.2009
Offline
7
1453

Прошу помощи c содержимым robots.txt

Задача состоит в том, что бы запретить роботам поисковиков (имеется ввиду поисковики через которые возможно определить обратные ссылки) индексацию сайта.

Через какие ПС можно палить обратные ссылки?

Как зовутся их User-agent?

Однозначно Yahoo:

User-agent: Slurp
Disallow: /

Еще обнаружено:

User-agent: Aport
Disallow: /
User-agent: WebAlta Crawler
Disallow: /
User-agent: Punto
Disallow: /
Keps
На сайте с 22.04.2008
Offline
89
#1

Да, но таким образом ты запретишь вообще индексировать пс yahoo. Да и зачем тебе закрывать просмотр бэклинков с сайта?

xzorro
На сайте с 20.04.2009
Offline
7
#2

Сайт ориентирован на Yandex, Google, Rambler с других ПС трафик мизерный, им можно пренебречь.

А бэки , на всякий лучай, от греха подальше, лучше спрятать

A
На сайте с 12.01.2006
Offline
61
#3

видимо чтобы спрятать от чужих глаз свои жирные бэки.

имхо не стоит этого делать.

ГЛАВная фарма-партнерка. Удобные аптеки, детальная статистика, высокий конверт! (http://www.glavmed.com/) | 150$ Бонус всем новичкам в ПОКЕРЕ (http://ru.pokerstrategy.com/u1XCQ7) $$$ на дороге (http://www.sape.ru/r.b17970ce21.php)
P
На сайте с 18.01.2009
Offline
49
#4
Apalon:
имхо не стоит этого делать.

А сеточку спрятать нужно ;)

Думаю запрет от индексации "левых" поисковиков есть : если сайт большой трафика много набегает пустого, нагрузка лишняя на сервер, ну и бэки

xzorro
На сайте с 20.04.2009
Offline
7
#5

неужели никто не занимался этим вопросом?

или это большой секрет?

ewg777
На сайте с 04.06.2007
Offline
225
#6
xzorro:
Сайт ориентирован на Yandex, Google, Rambler с других ПС трафик мизерный, им можно пренебречь.
А бэки , на всякий лучай, от греха подальше, лучше спрятать

Если сайт ориентирован на ПС, то это минимум гс. Лучшее решение для таких сайтов:

User-agent: *

Disallow: /
T
На сайте с 28.10.2005
Offline
182
#7
xzorro:
неужели никто не занимался этим вопросом?
или это большой секрет?

Это как неуловимый Джо

- Что, поймать ни кто не может?

- Да нет, он просто нафиг никому не нужен

Чего то вы не о том задумались

xzorro
На сайте с 20.04.2009
Offline
7
#8

ewg777, Tutor, а по существу моих вопросов вы в состоянии что либо добавить?

Другими словами: через какие поисковики возможно смотреть обратные ссылки, и неплохо если есть имя (т.е. User-Agent) их ботов

stifler_x
На сайте с 19.06.2008
Offline
193
#9

Как вы закроете беки от Яху? Если вы закроете сайт от индексации, то это еще не значит, что тот же Яху не будет индексировать страницы доноров...

xzorro
На сайте с 20.04.2009
Offline
7
#10

сайт А ссылается на сайт Б

речь идет о закрытии от просмотра входящей ссылки для Б т.е. сайт Б вбивается (например) в http://siteexplorer.search.yahoo.com и требуется не увидеть в результатах упоминание А

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий