Robots.txt - есть или нет? :)

J
На сайте с 11.03.2008
Offline
9
1213

Ща впервые озадалчися значением этого файла.

На серваке его нету. Хотя у меня сервак еще странный (амхост). Допустим хтаксес по фтп у меня не видно, только через файлменеджер с админки. Но роботсов не видно ни так, ни так. + по 404 статсам он в лидерах

Но, этого топика никогда бы не было, если бы мой роботс не показала мне гугля.

Ща вопрос как быть - рыться в нэте, искать правила оформления роботсов (кстати, если кто знает - бросьте в меня, плс ) или забить пусть гугля сама себя удовлетворяет?

Пока склоняюсь к первому.

Добавлено через 6 минут

Ща начал копаться в роботсе который держит гугля.

Оказалось шо эта красавица перевела последний пост моего ВП блога в хтмл и записала его в роботс.тхт.

Еще один жирный аргумент чтобы основательно разобраться что и как.

VO
На сайте с 08.06.2006
Offline
31
#1

Создай пустой текстовый файл robots.txt - если хочешь, чтоб всё индексировалось. Если есть, что хочешь закрыть или указать работам на основное зеркало (?) - тогда придется записывать.

Интересный блог (http://interblog.org) - Осторожно, покрашено! (http://pocrasheno.ru) Шоу-бизнес (http://pocrasheno.biz)
pplmr
На сайте с 30.11.2007
Offline
25
#2

Вы оба чего накурились ?

crk
На сайте с 23.05.2007
Offline
58
crk
#3
pplmr:
Вы оба чего накурились ?

+1.

jcayman, по чем опиум для народа?

J
На сайте с 11.03.2008
Offline
9
#4

сорри, в вопросе разобрался

такой вопрос. если файл роботс.тхт отсутствует. на 404 включен редайрект на главную. как я понял гугля под роботс.тхт держит мою главную. в связи с этим проблем не будет?

Unlock
На сайте с 01.08.2004
Offline
786
#5
jcayman:
гугля под роботс.тхт держит мою главную. в связи с этим проблем не будет?

Пока травой не поделитесь, никто ваш вопрос не поймет.

Есть желание, - тысяча способов; нет желания, - тысяча поводов! /Петр-I/.
Californiy
На сайте с 12.12.2006
Offline
95
#6
сервак еще странный (амхост)

Это модель сервака? Или Марка?... Просто действительно странно, ведь АмХост это модель АйФона...

Допустим хтаксес по фтп у меня не видно, только через файлменеджер с админки

А с правами доступа поиграться не пробовал?

если бы мой роботс не показала мне гугля

А что ещё она тебе показала?

пусть гугля сама себя удовлетворяет

Пропиши в роботсе:

User-agent: *

Disallow: /

и удовлетворяй себя сам...

Ща начал копаться в роботсе который держит гугля.

Твой роботс размещен на серваках гугли? Или в роботсе гугля? В любом случае - это нереально круто))

Оказалось шо эта красавица перевела последний пост моего ВП блога в хтмл и записала его в роботс.тхт.

А я думал гугль только на английский умеет переводить... Ан... нет... На Хтмл тоже...

Создай пустой текстовый файл robots.txt - если хочешь, чтоб всё индексировалось.

А если не создам? То какая часть сайта не будет индексироваться? Или рандомно?...

Тружусь в sapiense.com.
[Удален]
#7

jcayman, однозначно поделитесь травой!

Unlock, Californiy, +100

😂😂😂😂

[Удален]
#8

Мосчь... :)

[Удален]
#9
Psycho:
Мосчь...

Флуд......

organic
На сайте с 07.11.2004
Offline
141
#10

Афтар жжот

Yeah, well, I'm gonna go build my own theme park, with blackjack and hookers. In fact, forget the park!

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий