xVOVAx: богоносец, так у него все в порядке - нужная версия в индексе и редирект стоит . Он боится не будет ли проблемой два сайта в вебмастере
Он этого не боится. У него траф не с поиска.
Но свой robots сделал доступным (200 ОК) по всем зеркалам. Это так не гуглу нужно, а нестандартному яндексу.
roman1981: То есть, уточню этот нюанс: у меня на всех зеркалах должен быть один и тот же файл robots.txt с одной и той-же директивой host, я правильно понимаю?
Если вас ищут ещё и Яндексом...
И /robots.txt должен отдавать 200 ОК, т.е. вы должны его видеть в браузере по всем зеркалам (протоколам.субдоменам),
а не 301 на главное.
Ну найдите сеошный сайт (по =продвижение сайтов яндекс=) и полазьте по всем его зеркалам/robots.txt
roman1981: Вот, у меня есть некий файл robots.txt в корне моего веб-сайта:
Кстати говоря, правильно ли у меня составлена директива Host в данном случае, я не напутал ничего, может ещё протокол перед названием сайта прописать, как считаете?
В случае с HTTP протокол не указывается, только при HTTPS, ну читайте бота щукина по сцылке на поиск...
roman1981: Идём далее, именно это файл robots.txt, именно с этой конкретной директивой, должен быть доступен по следующим адресам:
В примере с яндексовским роботсом 200 ОК отвечается по всем зеркалам. Ну хотя бы Яндексу. Т.е. он не так же себя ведёт, как Гугл (идущий по 301 в случае /robots.txt)
Ну т.е. если вам Яндекс тоже важен, то с ним всё не так, как с Гуглом, прочитайте его хелп про склейку и пр.
То есть, по факту один и то-же ресурс (веб-сайт), но в аккаунте он заведен под два ресурса, один на http и второй на https, соответственно.
Как к этому относится Гугл
В хелпах однозначно написано, что это разные сайты.
-http://mysite.com
-https://mysite.com
ещё два сайта.
Если у вас 301 со всех таких ведёт на единственно правильное зеркало, не беспокойтесь. Не ждите, что искалки склеят всё именно так, как удобно вам. Они сделают как им удобно...
И отдельно обратите внимание на доступность для Яндекса одного и того же файла robots.txt
(с одной и той же Host) по всем редиректящим зеркалам
У Яндекса траф не из поиска, имелось в виду.
А так вот у всех разные ответы по разным зеркалам/robots.txt
http://yandex.ru/robots.txt 200 OK
https://yandex.ru/robots.txt 200 OK
http://www.yandex.ru/robots.txt 200 OK
https://www.yandex.ru/robots.txt 200 OK
https://www.google.ru/robots.txt 200 OK
http://www.google.ru/robots.txt 200 OK
http://google.ru/robots.txt 301 Location: https://www.google.ru/robots.txt
https://google.ru/robots.txt 301 Location: https://www.google.ru/robots.txt
http://my-site.com/robots.txt (301 редирект на главное зеркало)
https://my-site.com/robots.txt (301 редирект на главное зеркало)
http://www.my-site.com/robots.txt (моё главное зеркало!)
https://www.my-site.com/robots.txt (301 редирект на главное зеркало)
Т.е. нет понимания, что 301 != доступность (200 ОК)
sanek1991, некоторые их вообще открывают:
https://market.yandex.ru/search?text=nokia%20lumia%20920%20%D1%87%D0%B5%D1%85%D0%BE%D0%BB
https://www.avito.ru/sankt-peterburg?q=nokia+lumia++%D0%B1%D1%83
Много их в индексе?
https://www.google.ru/search?q=inurl%3Amarket.yandex.ru%2Fsearch%3Ftext
пиар этого Джона Федора, в итоге он его будет использовать.
Но неустойку отсудит.
богоносец, так у него все в порядке - нужная версия в индексе и редирект стоит . Он боится не будет ли проблемой два сайта в вебмастере
Он этого не боится. У него траф не с поиска.
Но свой robots сделал доступным (200 ОК) по всем зеркалам. Это так не гуглу нужно, а нестандартному яндексу.
То есть, уточню этот нюанс: у меня на всех зеркалах должен быть один и тот же файл robots.txt с одной и той-же директивой host, я правильно понимаю?
Если вас ищут ещё и Яндексом...
И /robots.txt должен отдавать 200 ОК, т.е. вы должны его видеть в браузере по всем зеркалам (протоколам.субдоменам),
а не 301 на главное.
Ну найдите сеошный сайт (по =продвижение сайтов яндекс=) и полазьте по всем его зеркалам/robots.txt
Вот, у меня есть некий файл robots.txt в корне моего веб-сайта:
Кстати говоря, правильно ли у меня составлена директива Host в данном случае, я не напутал ничего, может ещё протокол перед названием сайта прописать, как считаете?
В случае с HTTP протокол не указывается, только при HTTPS, ну читайте бота щукина по сцылке на поиск...
Идём далее, именно это файл robots.txt, именно с этой конкретной директивой, должен быть доступен по следующим адресам:
http://my-site.com/robots.txt (301 редирект на главное зеркало)
https://my-site.com/robots.txt (301 редирект на главное зеркало)
http://www.my-site.com/robots.txt (моё главное зеркало!)
https://www.my-site.com/robots.txt (301 редирект на главное зеркало)
Я правильно понимаю суть ваших слов?
Нет.
В примере с яндексовским роботсом 200 ОК отвечается по всем зеркалам. Ну хотя бы Яндексу. Т.е. он не так же себя ведёт, как Гугл (идущий по 301 в случае /robots.txt)
Ну т.е. если вам Яндекс тоже важен, то с ним всё не так, как с Гуглом, прочитайте его хелп про склейку и пр.
И добавите в .htacces исключение для robots, типа
RewriteCond %{SERVER_PORT} ^443$
RewriteCond %{REQUEST_URI} !^/robots.txt$
RewriteRule .* http://%{SERVER_NAME}%{REQUEST_URI} [R=301,L]
c без www на www сами... или в ТП. А потом проверьте ответы сервера по всем зеркалам/robots.txt
-http://www.mysite.com
https://www.mysite.com
То есть, по факту один и то-же ресурс (веб-сайт), но в аккаунте он заведен под два ресурса, один на http и второй на https, соответственно.
Как к этому относится Гугл
В хелпах однозначно написано, что это разные сайты.
-http://mysite.com
-https://mysite.com
ещё два сайта.
Если у вас 301 со всех таких ведёт на единственно правильное зеркало, не беспокойтесь. Не ждите, что искалки склеят всё именно так, как удобно вам. Они сделают как им удобно...
И отдельно обратите внимание на доступность для Яндекса одного и того же файла robots.txt
(с одной и той же Host) по всем редиректящим зеркалам
http://yandex.ru/robots.txt
https://yandex.ru/robots.txt
http://www.yandex.ru/robots.txt
https://www.yandex.ru/robots.txt
А то завтра ещё тему заведёте https://www.yandex.ru/yandsearch?text=%D0%BF%D0%B5%D1%80%D0%B5%D0%B7%D0%B4+HTTPS
Влияние ссылок из контента VS из меню - ну очень сильно разнятся.
Как это можно взвесить / проверить?
Просто введите номер один раз
Дайте гарантию, что завтра мне не посыплются SMS про сбер.деньги яндекс.пиццу и почту.NL
ТС, в хелпах ПС такие страницы однозначно советуют закрывать в robots
А есть аналоги этих страниц на сайте ? И как посещаемость у этих страниц ? Может стоит посадку сделать .
Может посадку сделать и на searchengines.guru/newreply.php?do=newreply
как поведет себя Яндекс и что будет с трафом?
Сегалович забанил бы за такой вопрос.
А зачем вам полностью бестолковые страницы?
А вдруг без них лучше станет?
современные доргены более наглядные сайты генерируют
Что им заложат, то и генерируют.
АГС и пр — почти вне зависисмости от ценности для пользователей.