Гугл перестал индексировать новые появляющиеся страницы

12
[Удален]
#11

Обнаружил такую интересную штуку. На уже проиндексированные страницы гоша все-таки заходит. У меня в боковом меню выводятся ссылки на последние добавленные материалы. Так вот гоша индексирует текст этих ссылок. Какого же ... он не идет далее?

K
На сайте с 31.01.2001
Offline
737
#12
koshak_gav:
В роботсе еще укажите хост - пример простого робоста:
User-agent: Yandex
Disallow: /*_openstat
Disallow: /*from=adwords
Disallow: /*showall
Disallow: /*element.php?PAGEN
Disallow: /*action
Disallow: /*clear_cache
Disallow: /images/
Disallow: /img/

Host: ВВВ.ВАШСАЙТ.ЗОНА

koshak_gav, если бы вы изучали FAQ про robots.txt, то знали бы, что пустые строки отделяют блоки директив. Поэтому ваши строчки с директивой HOST болтаются как ***** в проруби, и никак не подействуют.

А еще бы вы знали, что Google ничего не знает про директиву Host:, и не стали бы писать вот этот бред:

koshak_gav:
User-agent: Googlebot
Disallow: /*_openstat
Disallow: /*from=adwords
Disallow: /*showall
Disallow: /*element.php?PAGEN
Disallow: /*action
Disallow: /*clear_cache
Disallow: /images/
Disallow: /img/
Host: ВВВ.ВАШСАЙТ.ЗОНА

Незачот, антиреспект и мастдай.

P.S.

koshak_gav:
mouthly (если не ошибаюсь)
Это от слова mouth, означает по-видимому, орально? :)

Ну вы и блеснули.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
[Удален]
#13

Kost, а подскажите что-нибудь по моему вопросу. А то ну жу очень надо чтобы проиндексировал

K
На сайте с 31.01.2001
Offline
737
#14

Нет, аппендицит по телефону не вырезаю, извините.

[Удален]
#15
Kost:
Нет, аппендицит по телефону не вырезаю, извините.

ладно, будем искать другого врача)

koshak_gav
На сайте с 13.05.2009
Offline
72
#16

Спасибо что указали на мои ошибки - я тоже новичок и говорю то, что знаю и как это понимаю.

Теперь буду учитывать - роботс учился делать на основе книг Ашманова и то что подглядел у топовых сайтов - отступ хоста - да признаю это лаг - когда писал сообщение...

Насколько я знаю указание хоста гуглоботу это не минус и если он не влияет, то хуже не будет а вот если это начнет влиять, то лишним не будет - разве я не прав?

Сначала подумай, а потом сделай!!
[Удален]
#17

Присутствует такая же проблема...

[Удален]
#18
mp3lemonnet:
Присутствует такая же проблема...

У вас с англоязычным проектом? И расскажите подробнее, если можно. В случае, если проблемы совпадут - вместе будет проще решение искать

[Удален]
#19

сайт http://mp3lemon.net

http://www.google.ru/search?hl=ru&client=firefox-a&rls=org.mozilla%3Aru%3Aofficial&hs=Ztx&newwindow=1&q=site%3Amp3lemon.net&btnG=%D0%9F%D0%BE%D0%B8%D1%81%D0%BA&lr=&aq=f&oq=

Еще несколько недель назад было 3000 страниц, потом резко 23 000 страниц, сейчас 1600

то ли гугл мутить что-то, то ли не понятно мне ничего.

трафик с гугла растет (уже 6500 в день), но все идет исключительно на морду по ссылкам.

Когда сайт проиндексируется - не понятно.

Об какой-либо уникальности контента в моем случае говорить не приходится, т.к. я х.з. что там может быть уникального на mp3-сайте

mp3lemonnet добавил 10.07.2009 в 19:41

Мы сейчас один проект переведем на английский и пробуем его в гугл засунуть. посмотрим что получится...

[Удален]
#20
mp3lemonnet:
сайт http://mp3lemon.net

http://www.google.ru/search?hl=ru&client=firefox-a&rls=org.mozilla%3Aru%3Aofficial&hs=Ztx&newwindow=1&q=site%3Amp3lemon.net&btnG=%D0%9F%D0%BE%D0%B8%D1%81%D0%BA&lr=&aq=f&oq=

Еще несколько недель назад было 3000 страниц, потом резко 23 000 страниц, сейчас 1600

то ли гугл мутить что-то, то ли не понятно мне ничего.

трафик с гугла растет (уже 6500 в день), но все идет исключительно на морду по ссылкам.

Когда сайт проиндексируется - не понятно.

Об какой-либо уникальности контента в моем случае говорить не приходится, т.к. я х.з. что там может быть уникального на mp3-сайте

mp3lemonnet добавил 10.07.2009 в 19:41
Мы сейчас один проект переведем на английский и пробуем его в гугл засунуть. посмотрим что получится...

Может у гугля просто критические дни? вот я недавно совсем молодой блог (тоже англоязычный) запустил, так первый пост летом залез, а второй никак не хочет (хотя и ссылки не него есть dofollow с форумов и блогов, а также с закладок). Если сможете, сообщите о своих результатах после перевода своего проекта и "засовывания" в гугл.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий