Проблемы с Гуглем

C
На сайте с 14.02.2005
Offline
51
653

Не ребята, что то здесь не то.

Не любит меня гугль.

Вот весь лог по гуглю за сутки:

crawl-66-249-64-36.googlebot.com - - [26/Feb/2005:08:01:40 +0300] "GET /robots.txt HTTP/1.0" 301 309 "-" "Googlebot/2.1 (+http://www.google.com/bot.html)"

crawl-66-249-64-36.googlebot.com - - [26/Feb/2005:08:01:41 +0300] "GET /robots.txt HTTP/1.0" 200 254 "-" "Googlebot/2.1 (+http://www.google.com/bot.html)"

запросил 2 раза robots.txt и пауза

crawl-66-249-64-36.googlebot.com - - [26/Feb/2005:08:01:47 +0300] "GET / HTTP/1.0" 301 299 "-" "Googlebot/2.1 (+http://www.google.com/bot.html)"

после запросил "ничто" и свалил

crawl-66-249-64-77.googlebot.com - - [26/Feb/2005:08:27:45 +0300] "GET /robots.txt HTTP/1.0" 200 254 "-" "Googlebot/2.1 (+http://www.google.com/bot.html)"

а здесь, заметьте, ему сразу выдало 200 ок (такое редко бывает, обычно вначале 301)

crawl-66-249-64-77.googlebot.com - - [26/Feb/2005:08:27:46 +0300] "GET / HTTP/1.0" 200 35558 "-" "Googlebot/2.1 (+http://www.google.com/bot.html)"

опять запросил "нечто" и свалил до вечера

crawl-66-249-64-39.googlebot.com - - [26/Feb/2005:18:25:10 +0300] "GET /robots.txt HTTP/1.0" 301 309 "-" "Googlebot/2.1 (+http://www.google.com/bot.html)"

crawl-66-249-64-39.googlebot.com - - [26/Feb/2005:18:25:18 +0300] "GET /robots.txt HTTP/1.0" 200 254 "-" "Googlebot/2.1 (+http://www.google.com/bot.html)"

вот опять, 2 раза запросил robots.txt

crawl-66-249-64-39.googlebot.com - - [26/Feb/2005:18:25:20 +0300] "GET / HTTP/1.0" 301 299 "-" "Googlebot/2.1 (+http://www.google.com/bot.html)"

опять "ничто" и ушел окончательно

А теперь разъясните, плиз, что за поведение такое? :confused:

У меня в .htaccess редирект со всех зеркал на основной:

RewriteCond %{HTTP_HOST} !^www.site.ru$

RewriteRule ^(.*)$ http://www.site.ru/$1 [R=301,L]

C
На сайте с 14.02.2005
Offline
51
#1

Что, никто не знает?

Не верю!

L
На сайте с 20.08.2003
Offline
49
lvk
#2

Дык / это не "ничто", а хом пейдж, что тут необычного?

SilverMaster
На сайте с 08.10.2003
Offline
228
#3
Как писал lvk
Дык / это не "ничто", а хом пейдж, что тут необычного?

ну, приходит и запрашивает индекс.. потоему все прогнозируемо и стандартно.

Из детских комшаров: "А вдруг ночью придет страшный робот!" Из взрослых: "И криво проиндексирует сайт". Не всякий гик добежит до середины поисковой страницы гугла
C
На сайте с 14.02.2005
Offline
51
#4

Что прогнозируемо?

Один индекс запросить и свалить.

Это нормально?

L
На сайте с 20.08.2003
Offline
49
lvk
#5
Как писал Cruiser
Что прогнозируемо?
Один индекс запросить и свалить.
Это нормально?

Да

C
На сайте с 14.02.2005
Offline
51
#6

Все клещами приходится вытягивать.

А другие страницы он не видит?

L
На сайте с 20.08.2003
Offline
49
lvk
#7
Как писал Cruiser
Все клещами приходится вытягивать.
А другие страницы он не видит?

Ну если в логах нет заходов на другие страницы, следовательно "не видит" :) Нет никаких поводов нервничать, зайдет и на другие рано или поздно

D
На сайте с 04.02.2005
Offline
95
#8

попробуй просканируй сайт html анализатором.

У меня была подобная проблема после использования Mod_Rewrite, при этом html анализатор тоже не видел ни одной страницы кроме index.php, соответственно и гугля ходила только на индекс.

Магазин аккаунтов с балансом Litres,DNS,Ozon,Rotapost и еще 50+ других сервисов тут - vk.cc/7QK0Sk

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий