Ап 12.03.2009

yanus
На сайте с 21.01.2009
Offline
348
#371
Maksim:
Бот Яндекса на моих сайтах уже не был с 8 марта. Хотя страницы каждый день обновляются. Гугл и некоторые другие живут постоянно. Что-то непонятное происходит (либо не хватает опыта понять происходящее) :)

да у меня самого первый сайт)) я каждый день добавляю по 1-2 страницы, поэтому боты каждый раз приходя видят изменения, поэтому и часто заходят (ну, я так думаю:)) Для полноценной индексации я думаю надо дождаться апа.

[Удален]
#372

всем начинающим:

1. почаще смотрите в awstats сервака, и всё поймете (обычно айпи яши начинаются с 77.88.*.*)

2. в robots.txt укажите блокировку индексирования "мусорных" страниц - быстрее основные в индекс влезут (у товарища варезник - так Яша там наиндексил "Теговых" страиниц и "Печатных версий", а нормального контента 1-2к страиниц - а он радовался, что у него 85к страниц в индексе...тока выхлопа от тог не было - разве что сапа :) )

tempores
На сайте с 26.04.2008
Offline
13
#373
alesty:
что у него 85к страниц в индексе...тока выхлопа от тог не было - разве что сапа :) )

за 85 лет наверное продаст ссылки с них:))

Наверх лезет только то, что интересно людям!!!
[Удален]
#374

может боян, но из моих наблюдений по-поводу отношения Яндекса к robots.txt:

- Яндекс никак НЕ реагирует на User-Agent: *

- понимает только User-Agent: Yandex

Magao
На сайте с 11.12.2008
Offline
70
#375
alesty:
может боян, но из моих наблюдений по-поводу отношения Яндекса к robots.txt:
- Яндекс никак НЕ реагирует на User-Agent: *
- понимает только User-Agent: Yandex

У меня реагирует на User-Agent: * :)

_han_
На сайте с 17.08.2006
Offline
247
#376
alesty:
может боян, но из моих наблюдений по-поводу отношения Яндекса к robots.txt:
- Яндекс никак НЕ реагирует на User-Agent: *
- понимает только User-Agent: Yandex

ага именно так

Важно: GoGetLinks - размещение вечных ссылок | Достойный доход для вебмастера (http://gogetlinks.net/?inv=cf45iq) доход от 1К руб. в день. (http://trustlink.ru/registration/117003)
pregmatch
На сайте с 15.12.2005
Offline
39
#377

сам яндек спросит User-Agent: Yandex

Ничего не продаю и не покупаю.
artzor
На сайте с 30.10.2008
Offline
111
#378
Maksim:
Бот Яндекса на моих сайтах уже не был с 8 марта. Хотя страницы каждый день обновляются. Гугл и некоторые другие живут постоянно. Что-то непонятное происходит (либо не хватает опыта понять происходящее) :)

У меня по всем сайтам - 10-11 марта :(

SC
На сайте с 29.03.2006
Offline
60
#379
artzor:
У меня по всем сайтам - 10-11 марта :(

у меня на одном проекте был вчера 17,03,08 в 10-53 утра. 🍻 на остальных так же 9-11 марта.

G7
На сайте с 17.02.2009
Offline
57
#380

Вчера обновилась инфа о посещении ботом на 17.03.09 с 11.03.09 - страниц и беков не прибавилось - но на сайте бот засел с 23-00 вчерашнего дня и сканит до сих пор (самый долгий визит с 11-го) - может и тИЦ за одно апнется

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий