Помогите понять, что с сайтом

12
X
На сайте с 29.11.2008
Offline
7
1048

Есть сайт, Гугл не видит ничего дальше главной страницы.

В robots.txt прописано

User-Agent: *

Disallow: /admin.php

Allow: /

Заливал sitemap - гугл его не может прочитать (походу не видит на сервере)

С Яшей никаких проблем нет, в индексе все 5 страниц.

В чем может быть дело?

mup2
На сайте с 18.03.2009
Offline
99
#1

Какой возраст у сайта ?

П
На сайте с 19.04.2005
Offline
104
#2
xxaoc:
В чем может быть дело?

Какому поисковику такие ссылки понравяться

http://armasnab39.ru/langru?id=1646201da32639bef5dd9f174251b935

http://armasnab39.ru/price/langru?id=1646201da32639bef5dd9f174251b935

http://armasnab39.ru/product/langru?id=1646201da32639bef5dd9f174251b935

http://armasnab39.ru/pairs/langru?id=1646201da32639bef5dd9f174251b935

http://armasnab39.ru/contact/langru?id=1646201da32639bef5dd9f174251b935

Плюс к этому, сайт не большой, поэтому для него многовато ссылок с 404

т.е.

Заголовок ответа для http://armasnab39.ru/langru = 404 Not Found

Вечные ссылки в рассрочку, отобраны только качественные доноры Регистрация по приглашению -> http://gogettop.ru/?ref=18973 (http://gogettop.ru/?ref=18973)
AN
На сайте с 19.01.2007
Offline
105
#3

у меня тоже есть сайт яндекс индексировал а гугль не хочет кто может помочь?

сайт скину в личку

partner-company.com (http://partner-company.com) доставка цветов и букетов тут (http://gala-cveti.ru)
X
На сайте с 29.11.2008
Offline
7
#4
Пилот:
Какому поисковику такие ссылки понравяться
http://armasnab39.ru/langru?id=1646201da32639bef5dd9f174251b935
...

Это id сессии для куков. Особенность движка. Тока при первом заходе появляется.

А с 404 на главной - будем бороться


Какой возраст у сайта ?

3 месяца

K
На сайте с 31.01.2001
Offline
737
#5
xxaoc:
Это id сессии для куков. Особенность движка. Тока при первом заходе появляется.

Вы думаете, что роботы поисковиков разбирают и запоминают ваши куки?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
X
На сайте с 29.11.2008
Offline
7
#6
Kost:
Вы думаете, что роботы поисковиков разбирают и запоминают ваши куки?

Нет, конечно, но убрать их не получается. И другие сайты с id индексируются нормально.

П
На сайте с 19.04.2005
Offline
104
#7
xxaoc:
Нет, конечно, но убрать их не получается. И другие сайты с id индексируются нормально.

убрать все же желательно, так как это не просто id, а сессии

покажите примеры, где нормально индексируются молодые сайты с сессиями

p.s.

все же как-то странный диалог, спрашиваете помощи, вам подсказываю как лучше,

а в ответ - нет этого делать не буду

:)

ZoomY
На сайте с 07.11.2008
Offline
165
#8

Кхм. Нет директивы Allow, есть только Disallow. Файл robots.txt ничего не разрешает, только запрещает.

This might be a reason...

Размещу ваши статьи на сайтах с тИЦ до 1400 по 5$ (/ru/forum/846111) Сейчас многие ищут хостинг за пределами России. Ukrnames - один из лучших вариантов: (http://ukrnames.com/?ref_id=114) и лидер рынка, и привычно, и по-русски, и вне юрисдикции РФ.
X
На сайте с 29.11.2008
Offline
7
#9
Пилот:
убрать все же желательно, так как это не просто id, а сессии
покажите примеры, где нормально индексируются молодые сайты с сессиями

p.s.
все же как-то странный диалог, спрашиваете помощи, вам подсказываю как лучше,
а в ответ - нет этого делать не буду
:)

Пример - этот же сайт в Яндексе.

Я не говорю, что не буду этого делать, я говорю что _не могу_ этого сделать. Движок такой, а клиент не согласится пересаживать на другой.

xxaoc добавил 15.09.2009 в 14:56

ZoomY:
Кхм. Нет директивы Allow, есть только Disallow. Файл robots.txt ничего не разрешает, только запрещает.
This might be a reason...

Переписал на это

User-Agent: *

Allow: /

User-Agent: googlebot

Allow: /

ZoomY
На сайте с 07.11.2008
Offline
165
#10
xxaoc:

xxaoc добавил 15.09.2009 в 14:56


Переписал на это

User-Agent: *
Allow: /

User-Agent: googlebot
Allow: /

ТС, поймите, директивы Allow не существует в природе, точно также, как не существует тегов <nogoogle> и <noyandex>. Кроме того, не закрывайте от индексации страницы типа admin.php — роботу без разницы, а у сторонних людей может возникнуть нездоровый интерес к таким местам, которые вы пытаетесь скрыть, а на самом деле выставляете напоказ.

Всё, что вам нужно прописать в данном случае, это:

User-agent: Yandex
Disallow:
Host: armasnab39.ru

Директива Disallow здесь пустая т.к. она по правилам является обязательной и если её опустить, бот вас может «не так понять». Хост указываете для Яндекса (у вас редирект на «без-www» стоит) и ничего не закрываете от индексации.

Я бы на вашем месте также удалил и повторно бы добавил сайт в Google Webmaster Central, проверьте кстати, не с www ли вы его там указали — это тоже может быть причиной.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий