Избитая тема бот не идёт вглубь сайта

123 4
IL
На сайте с 04.10.2003
Offline
196
IDL
2286

Сабж

Пишу уже от безвыходности

ПР на доменах как минимум 2

На одних полностью всё индексирует

на других только индексную

Может у меня роботс неправильный(в чём я сильно сомневаюсь) ?

User-Agent: *

Disallow: /protect

Как "подтолкнуть" бот для дальнейшей индексации ?

I
На сайте с 28.10.2002
Offline
108
#1

Посмотрите нет ли в коде страницы "NOINDEX". У меня была такая проблема, пока не заметил.

Для того чтобы подтолкнуть киньте ссылки внутрь сайта.

-=Илья=-
На сайте с 05.12.2003
Offline
222
#2

"Посмотрите нет ли в коде страницы "NOINDEX". У меня была такая проблема, пока не заметил."

Гугля же на ноиндекс клал с высокой колокольни... Или нет? У меня бот ходит куда не надо только в путь, через все ноиндексы и индексирует список пользователей, хоть клокингом балуйся убирая лишние ссылки (что я в некотором роде и сделал - запретил гостям смотреть на список пользователей - формально не клоакинг, а на самом деле он ;) ).

Cossack
На сайте с 17.12.2002
Offline
279
#3

Наверное, надо поставить пару внешних ссылок на внутренние страницы и потом закинуть места, откуда стоят внешние ссылки в Google?

Прощание славянки... (http://www.youtube.com/watch?v=0xf9lFMWfKw)
IL
На сайте с 04.10.2003
Offline
196
IDL
#4
Как писал Cossack
Наверное, надо поставить пару внешних ссылок на внутренние страницы и потом закинуть места, откуда стоят внешние ссылки в Google?

а чё на остальных доменах прошло всё на ура.

ПР не нулевой,должен вглубь лезть

а не лезет гад

ессно ноуиндекс нет

IL
На сайте с 04.10.2003
Offline
196
IDL
#5
Как писал -=Илья=-
"Посмотрите нет ли в коде страницы "NOINDEX". У меня была такая проблема, пока не заметил."
Гугля же на ноиндекс клал с высокой колокольни... Или нет? У меня бот ходит куда не надо только в путь, через все ноиндексы и индексирует список пользователей, хоть клокингом балуйся убирая лишние ссылки (что я в некотором роде и сделал - запретил гостям смотреть на список пользователей - формально не клоакинг, а на самом деле он ;) ).

да вообще не хочет внутрь идти

сейчас просто убрал файл роботс - в нём было запрещение на индексацию одной папки,может реально это ему и не понравилось

может есть ещё какие-нить мнения о причине нежелания бота идти вглубь сайта.

ЗЫЖ ПР=3

Pavlus
На сайте с 26.01.2004
Offline
121
#6

какие УРЛы ?

может быть они длинные и некрасивые?

кинь в личку УРЛ твоего сайта

B
На сайте с 13.11.2002
Offline
89
#7
ЗЫЖ ПР=3

не факт что по этой причине он полюбит Ваш сайт. :)

был прицедент что и с 4-кой не сильно интересовался...

E
На сайте с 09.04.2004
Offline
10
#8
Как писал Pavlus
какие УРЛы ?
может быть они длинные и некрасивые?
Можно подробнее плиз? Есть ли ограничения на длину имён *.HTML файлов для разных поисковиков? Однажды встретил 31-символ в имени максимум, но может для разных поисковиков она разная? А то "Меня терзают смутные сомнения..." goole вроде слопалб а вот остальные SE почему-то нет.
[Удален]
#9

Ну то что больше 31 позволяется - точно. Насчет лимита не знаю, но я бы поостерегся делать урлы длиннее 255 символов.

E
На сайте с 09.04.2004
Offline
10
#10
Как писал Interitus
Ну то что больше 31 позволяется - точно. Насчет лимита не знаю, но я бы поостерегся делать урлы длиннее 255 символов.

Я имею ввиду не полный URL, а длину имён файлов конкретных страниц, Adobe GoLive её ограничил 31-м символом, вот я и подумал про возможное "не сварение" у поисковых ботов. Может такое быть?

123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий