Яндекс. Склейка 301 без Host в robots.txt чего ждать

123
vetlik
На сайте с 01.07.2010
Offline
133
#11
Vasiliy001:
Была попытка склейки серверным редиректом с www на без www. В robots.txt host не прописывалась. Теперь прочитал вот эту страшилку http://noindex.by/seo/vsya-pravda-o-domenah-sklejke-s-www-i-bez-www

Как раз тот случай.

host то я теперь прописал, но непонятно чего ждать. Это правда, что теперь склейщик может и через полгода прийти?

Если все старые страницы из индекса выпали, то есть вероятность, что ждать придется долго.🍿

А если остались, то вообще ничего страшного - при следующих обходах все восстановится.

vetlik добавил 10.05.2011 в 14:31

И клеить надо, вначале host, а после склейки ставить redirect 301 на весь сайт.

vetlik добавил 10.05.2011 в 14:32

У яндекса 301 редирект нормально работает только при внутренних редиректах, при внешних можно ждать всего, что угодно.

[Удален]
#12
7tvn54w0:
че за бред, с какой радости робот не найдет роботс, если это один и тот же сайт

www и без совершенно разные сайты (вопреки некоторым заблуждениям новичков), можно даже устроить чтоб они совершенно разное содержимое отдавали, потому если редирект распространяется на все включая роботс.тхт на старом домене, то яша не сможет его прочитать ТАМ и несклеит, или склеит через год возможно.

Насчет поставить редирект не все кроме файла роботс.тхт мысль казалось бы здравая, но погуглите есть пример - товарищь приводит даже код для .htaccess эксперимент он ставил в феврале, недавно бросил эту затею нифига не поклеилось, почему ХЗ...

Matis
На сайте с 20.10.2007
Offline
124
#13

Сколько моя практика показывает - редиректом сразу оочень плохо клеить, тем более когда сайт уже устоявщийся и имеет немало стораниц в индексе.

Сначала обнозначто прописываем в роботс.тхт директиву хост, а уже потом после склейки я считаю что все же стоит воспользоваться 301 редиректом, даже по той приыине, что если юзер будет ввводить руками адрес сайта, он может ввести с ццц и успешно ходить по сайту с ццц :) и допустим потом оставить естественный бэк с таким УРЛом, что соответсвенно хуже будет...

Если решили делать, то нужно делать до конца, просто граммотно.

☜♡☞ Анализ и оптимизация DLE сайтов (/ru/forum/492127). Индивидуальный подход! Телеграм: @Matfor • Комплексное создание сайтов! • Продвижение сайтов и интернет магазинов!
NR
На сайте с 11.11.2008
Offline
90
#14

После прописки в директиве Host главного зеркала на одном из доменов ждал примерно 3 месяца. 5.05.2011 наконец-то пришло письмо в панели вебмастера

Произошла смена главного зеркала
Здравствуйте, XXXXXXXXX XXXXXXXX!

Ваш сайт www.домен.ru был признан неглавным зеркалом сайта домен.ru. Поэтому в списке Ваших сайтов www.домен.ru был автоматически заменён на домен.ru. Подробнее о сайтах-зеркалах Вы можете прочитать в Помощи.

Рекомендуем вам проверить, что новое главное зеркало доступно для индексирования и отдает роботу код 200.

Если Вы хотите в будущем изменить главное зеркало Вашего сайта, воспользуйтесь рекомендациями в соответствующем разделе Помощи.
---
С уважением,
Яндекс.Вебмастер

Только после этого установил редирект,падений трафа пока не замечено.

75
На сайте с 29.01.2011
Offline
39
#15
Aндрeй:
www и без совершенно разные сайты (вопреки некоторым заблуждениям новичков), можно даже устроить чтоб они совершенно разное содержимое отдавали, потому если редирект распространяется на все включая роботс.тхт на старом домене, то яша не сможет его прочитать ТАМ и несклеит, или склеит через год возможно.

Насчет поставить редирект не все кроме файла роботс.тхт мысль казалось бы здравая, но погуглите есть пример - товарищь приводит даже код для .htaccess эксперимент он ставил в феврале, недавно бросил эту затею нифига не поклеилось, почему ХЗ...

да какие тут заблуждения новичков, окститесь :), какая разница роботу прийти на сайт через www или без него, или попасть с одного на другой по редиректу, физически файл роботс то лежит в одном месте и доступ к нему будет и там и там, если не запретить специально.

Или вы считаете, что роботс яндекса на столько туп, то придя через редирект, например, с ввв на безВВВ, и посмотрев роботс, а там хост без ввв, подумает, что тут подвох и не воспримет этот роботс за настоящий :)

п.с. сам всегда прописываю и хост в роботсе и редирект одновременно, проблем со склейкой не было.

kosenka
На сайте с 02.12.2007
Offline
122
#16
7tvn54w0:
да какие тут заблуждения новичков, окститесь :), какая разница роботу прийти на сайт через www или без него, или попасть с одного на другой по редиректу, физически файл роботс то лежит в одном месте и доступ к нему будет и там и там, если не запретить специально.
Или вы считаете, что роботс яндекса на столько туп, то придя через редирект, например, с ввв на безВВВ, и посмотрев роботс, а там хост без ввв, подумает, что тут подвох и не воспримет этот роботс за настоящий :)

п.с. сам всегда прописываю и хост в роботсе и редирект одновременно, проблем со склейкой не было.

Ну не знаю. Есть сайт с "www", поставил в .htaccess:


# переносим все что начинается с "www" на БЕЗ "www"
RewriteCond %{HTTP_HOST} ^www\.(.*)$ [NC]
RewriteRule ^(.*)$ http://%1/$1 [L,R=301]

При таком раскладе в Яндекс.Вебмастере возникает ошибка: не удалось загрузить файл robots.txt

Написал в техподдержку Яндекс.Вебмастера, пришел ответ:


Вам следует убрать редирект, чтобы робот мог загрузить файл по адресу http://www.site.ru/robots.txt.

Как только убрал из .htaccess редирект - robots.txt сразу же прочитался...

p.s. Очень плохо, что Яндекс видя редирект, не может по нему перейти и прочитать файл (

75
На сайте с 29.01.2011
Offline
39
#17

%1 - это что по вашему? у вас сайто то вобще открывался? :)

получается бесконечный редирект. тут не только роботс, вобще ни одной страницы прочитать нельзя

DO
На сайте с 20.01.2010
Offline
55
#18

вот редирект, при котором роботс будет читаться:


RewriteCond %{HTTP_HOST} !^www\.
RewriteCond %{REQUEST_URI} !^/robots\.txt$
RewriteRule ^(.*)$ http://www.%{HTTP_HOST}/$1 [R=301,L]

надеюсь, это положит конец спорам

платно проведу аудит сайта и исправлю все технические проблемы, которые могут мешать продвижению (/ru/forum/594052)
75
На сайте с 29.01.2011
Offline
39
#19

он и у kosenka читался бы, если бы вместо %1 поставили бы правильное значение :)

чет от темы ТС все дальше уходим:)

сделайте xml карту сайта с нужным хостом и загрузите в ЯВ, возможно, вам повезет и зеркальщик придет раньше, чем через пол года:)

пс: и проверьте редирект, тот ли он:)

kosenka
На сайте с 02.12.2007
Offline
122
#20
7tvn54w0:
он и у kosenka читался бы, если бы вместо %1 поставили бы правильное значение :)

Убирал - все равно не читается.

Вообщем убрал сейчас редирект "с www -> без www", нехай так пока будет, а потом посмотрим.

123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий