Закрыть FTP от индексации

167

Dr.BoT

22 февраля 2012, 20:36

1004

Сабж.

Попал фтпшник в индекс, а лучше, чтобы его там небыло.

24

6ecuk

22 февраля 2012, 21:26

#1

У меня вон robots.txt попал в индекс... :) Гоша, такой Гоша...

195

wwwwww

22 февраля 2012, 21:51

#2

Закройте анонимный доступ.

Видишь? Свободная подпись.

167

Dr.BoT

23 февраля 2012, 06:16

#3

А запретить индексацию не закрывая анонимный доступ нельзя?

S

173

Saney

23 февраля 2012, 11:40

#4

Dr.BoT:
А запретить индексацию не закрывая анонимный доступ нельзя?

можно:

- те же самые действия, что и для обычных сайтов в Google Webmaster Tools;

- закрыть в robots.txt (файл разместить по анонимному доступу в корень);

- конкретно для google еще можно запретить индексацию сайта (не только FTP, а и .txt файлов ) с помощью заголовков сервера HTTP X-Robots-tag.

Bing представил свой новый В Google Webmaster Tools Google: ранжирование файла robots.txt