страницы заблокированы в robots, но в индекс попадают

12
E9
На сайте с 02.11.2010
Offline
20
1562

страницы заблокированы в robots и noindex, но в индекс все равно попадают. в чем проблема?

Kartinka2008
На сайте с 13.04.2009
Offline
65
#1

Думаю, попадают урлы и тайтлы. А в кеше страниц нет, и в поиске не учавствуют.

Календар вагітності (http://40weeks.com.ua/) по тижнях і місяцях. Поради експертів.
K
На сайте с 31.01.2001
Offline
737
#2
Kartinka2008:
урлы и тайтлы

нет, только урлы, тайтлов робот знать не может.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
E9
На сайте с 02.11.2010
Offline
20
#3

да, попадают только урлы. в кеше страниц нет. можно сделать, чтобы даже урлы не попадали?

B
На сайте с 10.07.2010
Offline
20
#4
Kartinka2008:
Думаю, попадают урлы и тайтлы. А в кеше страниц нет, и в поиске не учавствуют.

а что такое возможно?

Недвижимость от собственников Украина zametr.ua (http://zametr.ua)
Василий Ткачев
На сайте с 19.05.2005
Offline
481
#5
eqw999:
да, попадают только урлы. в кеше страниц нет. можно сделать, чтобы даже урлы не попадали?

так вы на них внутренние ссылки отрубите и не будут индексироваться

Продвигаем естественно ( http://www.inetessentials.ru/ ) и непринужденно. Практический курс по оптимизации ( https://allintop.ru/optimization/ ) - без воды и на основе сайтов студентов. Ежегодная конференция All in Top Conf (https://www.allintopconf.ru/)
bubliks
На сайте с 18.01.2011
Offline
1
#6

попробуйте закрыть для всех ботов и спецом для гугла,

проверьте через гугл.вебмастерс

:)

путИница (http://stihi-rus.ru/1/chukovskiy/19.htm) :) - Чуковский 1926! :) моя дача (http://ydacha.ru) - ydacha :) моя мечта (http://renault.ru/img/carc/90b1/color3/vnmcfg290b1te21b.jpg) :) - сандерик :)
K
На сайте с 31.01.2001
Offline
737
#7
bubliks:
попробуйте закрыть для всех ботов и спецом для гугла,

Бот не ходил на эту страницу. Сюрприз?

Для тех, кто все еще в танке: бот знает адрес этой страницы по ссылке и показывает ее адрес в выдаче.

Он ее не скачивал

inetessentials:
и не будут индексироваться

и тем более НЕ ИНДЕКСИРОВАЛ.

Василий Ткачев
На сайте с 19.05.2005
Offline
481
#8
Kost:
и тем более НЕ ИНДЕКСИРОВАЛ.

читай внимательней.. я имел в виду, что если ссылок на страницу не будет, то ее и не будет :)

E9
На сайте с 02.11.2010
Offline
20
#9
inetessentials:
так вы на них внутренние ссылки отрубите и не будут индексироваться

без внутренних ссылок нельзя - пользователи должны переходить на эти страницы

eqw999 добавил 18.01.2011 в 12:11

bubliks:
попробуйте закрыть для всех ботов и спецом для гугла,
проверьте через гугл.вебмастерс
:)

в вебмастерс эти страницы показаны как заблокированные через robots

K
На сайте с 31.01.2001
Offline
737
#10

Начнем с начала.

eqw999:
в чем проблема?

Вот именно, в чем проблема?

Не вижу проблемы.

Робот страницы не индексирует и ни по каким запросам содержимое страниц не находит, он не знает, что написано на странице.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий