Форум Поисковые системы Google

Почему гугл индексирует страницы, запрещенные в robots.txt?

12
StaroverovMax
На сайте с 31.05.2006
Offline
174
StaroverovMax
#11
palladin_jedi:
Он через недельку одумаеться и спрячет их.

Именно так у меня и было, роботсы были прописаны правильно.

Сила есть - ума еще больше надо.. Фитнес, бодибилдинг (http://sportmashina.com), а форум - закачаешься! (http://forum.sportmashina.com/index.php)
Webliberty
На сайте с 30.10.2010
Offline
141
Webliberty
#12

Всем спасибо, буду ждать! :)

✅ https://webliberty.ru | Подпись заверена нотариусом ©️
angr
На сайте с 11.05.2006
Offline
413
angr
#13
faedrus:
у меня запросы в топ попали, только после того как я весь сайт в гугле запретил к индексации.
причем в серпе только урл висел.
запрет снял - позиции пропали.

а хлопцы то и не знают! а соль-то вот в чем! ;)

Требуется СЕО-Специалист в Кишиневе, в офис. ()
alexburzak
На сайте с 28.11.2006
Offline
61
alexburzak
#14
webliberty:
Вы имеете в виду через удаление URL вручную?

Да.

Либо ставишь 301 и он сам современем выкидывает.

😡

URL: Продвижение сайтов, построение сайтов, сопровождение сайтов (http://www.upmaster.co.il/default.aspx?lan=ru) Прежде, чем задать вопрос я всегда пользуюсь поиском и MSDN!
B
На сайте с 13.11.2002
Offline
89
Balabass
#15

зря смеётесь...

если на страницу стоят ссылки, она запрещена роботсом и сервер по её адресу отдаёт 404, то урл отлично попадает в серп и прекрасно ранжируется на основе только ссылочного...

кстати пролетая много фильтров... :)

баг пока до конца не исправили, так-что некоторые им успешно пользуются... :)

Balabass добавил 06.01.2011 в 01:51

а... забыл дописать, править сей баг лучше 301 или если всётаки нужно закрывать роботсом - то отдавать 200 а не 404...

хотя по прошествии Н-нного кол-ва времени урлы и сами вылетят... :)

Что делать с битыми 301, 302 редирект и Лучшие SEO-практики по каноникализации
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий