Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Ряд вопросов (robots.txt Yandex Google)

D
На сайте с 25.02.2005
Offline
5
Dogmat
576

Приветствую!

Поиск не работает.

Помотал трэды, но так и не нашел искомое.

Вопросы:

1. robots.txt - как запретить индексацию сайта всеми роботами кроме русских и украинских? Где почитать можно настройки? Проект завязан на определнную страну и трафик иностранный весьма неприемлем.

2. Через сколько дней появляется в выдаче и нформация, собраная роботом яндекса сегодня? Скажем сегодня он проел 2к старниц, когда они в выдаче появятся?

3. Что важнее Гуглю для позиции в выдаче, ссылающиеся сервера или количество упоминаний? Скажем есть сайт у которого ссылающихся страниц - 10, а упоминаний 200к, PR-2 а трафика гугль выдает весьма много. А есть сайт имеющий ссылок 200, упоминаний 5к, PR-5 и гугль дает 100-150 хитов...

Спасибо :)

Lor
На сайте с 28.05.2004
Offline
353
Lor
#1
1. robots.txt - как запретить индексацию сайта всеми роботами кроме русских и украинских?

Про русских не знаю, а насчет украинских можно написать:

User-agent: з Рiдной Украiины?

Disallow: гэць отсель!

Йопез - форум без модераторов. https://yopez.com
D
На сайте с 25.02.2005
Offline
5
Dogmat
#2

Хм...

Весело.

Только прежде надо было прочитать мой пост. Украинские как раз для меня важнее. :)

Мне украинский трафик нужен.

D
На сайте с 25.02.2005
Offline
5
Dogmat
#3

никто не может подсказать?

J
На сайте с 27.02.2005
Offline
52
janna
#4

Вот тут написано, как одна прога помогает это делать

http://net-promoter.com/ru/pagepromoter/help/robots_editor.html

C
На сайте с 19.09.2001
Offline
120
Cherny
#5
1. robots.txt - как запретить индексацию сайта всеми роботами кроме русских и украинских? Где почитать можно настройки? Проект завязан на определнную страну и трафик иностранный весьма неприемлем.

Примерно так: 


#Всем роботам запрещаем индексировать сайт

User-agent: *

Disallow: /



#Разрешаем тем, которые нам нужны

User-agent: Yandex

User-agent: StackRambler

User-agent: MetaSpider

...

User-agent: Googlebot

Disallow:
С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)
Коля Дубр
На сайте с 02.03.2005
Offline
153
Коля Дубр
#6

А где собственно надо размещать robots.txt - в самом-самом корне, или в публичной директории (public_html или www)?

Разрабатываю общую шину (http://habrahabr.ru/company/floxim/blog/268467/) помаленьку. ...а еще у меня есть бложек (http://www.blogovo.ru/).
C
На сайте с 19.09.2001
Offline
120
Cherny
#7
А где собственно надо размещать robots.txt - в самом-самом корне, или в публичной директории (public_html или www)?

Размещать надо так, чтобы его можно было найти по адресу http://www.site.com/robots.txt, где физически файл должен находиться - спросите у хостера.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий