богоносец, традиционно исходят из того, что со / и без, для ПС дубли аналогичные вашим примерам, т.е. мусорные страницы которые усложняют индексацию или даже могут повлечь санкции.
Вы пишите в индексе их нет потому что ПС уже отфильтровали.
При этом, необходимость настройки 301, обосновываете тем что фильтрация не идеальная (с чем трудно не согласится), и в качестве доказательства даже приводите примеры кривых ссылок. Но примера индексации дублей со слешем и без, нет ни одного, или ПС ни одного не показывают...
Это ведь само по себе свидетельствует что отношение не такое же как к мусорным страницам, а скорее как к www.
Но дубли www, хоть бы можно увидеть в Гугле, по крайней мере для молодых сайтов. Еще недавно можно было и в Яндексе.
Сейчас, на 100% не настаиваю, но на практике уже больше года не встречал. Видимо пофиксили, и рискну предположить, что еще до индексной базы. Т.е. – нет никакой фильтрации 10 000 дублей (а по факту треть всего инета), есть фиксированная индексация с www или без, и все. И никаких санкций, за отсутствие 301 на www (как и на слеш), или профита за его настройку не замечено (ссылочное отдельная тема, сейчас про дубли засоряющие индекс).
Проблема "/" по масштабу сопоставимая, чем тащить в индекс 5-15% всего инета, и потом фильтровать, или тупо не показывать, не логичней ли поступить как и с www?
Или считать одной и той же страницей, а в индекс брать как нашел на сайте т. е.
богоносец: ПС в запросе / не чувствуют
не только для поиска но и для индексации?
---------- Добавлено 09.01.2016 в 17:19 ----------
богоносец, я же не спорю что лучше перебздедь, и тоже запуская новый сайт проверяю редиректы что бы все по феншую.
Вопрос интересен в теории. Ведь нет этих дублей, никто их не видел, хотя бы для молодых, аналогично с www в Гугле, пока ПС основной не определит.
Отсюда и предположение, что индексировать со слешем или без, определяется один раз, для всего сайта, до тех пор пока прямо не будет задано иное через 301, и видимо еще на стадии первичной индексации. Что кстати и для экономии ресурсов куда практичней…
Но вас никто не заставляет, верьте, что будет всё хорошо, и нигде внутри сайта вы по ошибке не сошлётесь куда не надо.
Хорошо, изменю вопрос, думаю не только мне будет интересно, ибо со слешами кажется и правда, дуют на воду, а вдруг кипяток :)
Есть примеры, сайта индексируемого без (или с слешами), и что бы одна/две/пять страниц проиндексировались с слешами (или без)?
В данном случае я не настаиваю что подобного не бывает, но на практике тоже не видел.
Не воспринимайте в штыки, но просто, если и таких примеров никто привести не сможет, то на чем тогда держится уверенность что для ПС это разные страницы?
ПС
Примеры хорошо бы живые, а не в духе
ziliboba0213: Поставил с дуру 4к ссылок вначале с / потом без. Получил почти 4к дублей. Пол года яндекс выплевывал лишнее после редиректа. Но это было около 3 лет назад.
из воспоминаний многолетней давности
богоносец:
Может ещё скажите, что остальные дубли — не дубли? Очень надо www.yandex.ru/m/?админ Или есть какое-то принципиальное отличие этого мусора от / на конце?
В мусоре отличий нет, но мы спорим, является ли наличие/отсутствие слеша на конце этим самым мусором, разными страницами для ПС. А вы настойчиво предлагаете примеры со слешем в середине...
богоносец: В запросе он не чувствует / (и таким запросом индексацию не проверяют)
и у него не та скорость, что у гугла
(и может быть вам понравился мусор в гугл.индексе).
Нет там ни одного примера со слешем на конце, а обсуждаем именно его
богоносец:
У ПС есть задача сократить расход своего железа. Они решают свою задачу, а не вашу. Не понятно? Со своей задачей они справляются часто, а с вашей как получится. Правильно получается не в 100% случаев.
Какая разница какие задачи решает ПС, если они совпадают с моими
богоносец:
Как правило вы видите результат уже после отфильтровывания дублей (изредка это может сопровождаться вылетом всего сайта).
Проиндексированные дубли со слешем и без в конце (не в начала или середине), можно все таки увидеть?
И интересно, почему сайт у которого не настроен 301 для слешей должен выпадать из индекса, если конечно рукожопый вебмастер не прочитает о том как важен этот редирект и не полезет его настраивать? :)
богоносец: Вы хотите чтобы я 7 минут поковырялся и сделал такое? Сделайте сами.
Ну при чем здесь какие-то уникальные ситуации, которые теоретически можно реализовать. Что технически страницы разные, и так понятно, не понятно считают ли ПС их таковыми.
Если у меня по дефолту сайт.ру/розовые-слоны/большие-слоны, без слеша на конце, и нет 301, ПС проиндексируют его со слешем, или в ПС появятся дубли со слешем и без?
Зачем заморачиваться склейкой если ПС и сами это отлично делают?
Опять таки, теоретически можно предполагать что кто то поставит ссылку со слешем. Но здесь кажется нечто аналогичное www и без, но так как реализовано в Яндексе - т. е. - если по дефолту без www, внутренние ссылки без www, то только так он индексировать и будет.
богоносец: Ну щас попостим, посмотрим.. А с параметрами там уже есть со слешем и без.
богоносец: Если вы чего не видели, то вполне возможно индексация того сцайта для ПС когда-то оказывалась под вопросом. И автоматическое решение проблемы случайно оказалось таким, как хотелось бы вебмастеру.
А если я уже несколько лет каждый день ковыряю чужие сайты, работа у меня такая. В т.ч. и на предмет настроек индексации. И ни разу за все это время не видел в индексе дубля со слешем и без. Так же как и описанную вами ситуацию, где со слешем и без разный контент.
Это значит что мне везет, или все же ПС сами успешно клеят?
Вчера дал человеку рефку, он по ней прошел, и пишет - на странице все время что-то перезагружается, экран дергается и ничего не работает, в т.ч. регистрация. А по прямой ссылке зарегистрировался нормально.
Решил проверить, разлогинился и сам перешел по рефке - так и есть, зарегистрироваться не возможно. Сегодня то же самое.
Да есть такие страницы которые содержат page и много в других разделах
Проверялка хоть и ругается на недопустимый символ, но страницу распознает как запрещенную.
Так и запрещайте
Disallow: /kms_portfolio+stat+numz-8.html
Потом понаблюдаете, скорее всего благополучно выпадет...
Ну конечно можно! В .htaccess прописывается правило
А почему оба варианта (inger.com.ua и inger.com.ua/) отдают код 200, и копируя из адресной строки, я получаю inger.com.ua/ ?
богоносец, традиционно исходят из того, что со / и без, для ПС дубли аналогичные вашим примерам, т.е. мусорные страницы которые усложняют индексацию или даже могут повлечь санкции.
Вы пишите в индексе их нет потому что ПС уже отфильтровали.
При этом, необходимость настройки 301, обосновываете тем что фильтрация не идеальная (с чем трудно не согласится), и в качестве доказательства даже приводите примеры кривых ссылок. Но примера индексации дублей со слешем и без, нет ни одного, или ПС ни одного не показывают...
Это ведь само по себе свидетельствует что отношение не такое же как к мусорным страницам, а скорее как к www.
Но дубли www, хоть бы можно увидеть в Гугле, по крайней мере для молодых сайтов. Еще недавно можно было и в Яндексе.
Сейчас, на 100% не настаиваю, но на практике уже больше года не встречал. Видимо пофиксили, и рискну предположить, что еще до индексной базы. Т.е. – нет никакой фильтрации 10 000 дублей (а по факту треть всего инета), есть фиксированная индексация с www или без, и все. И никаких санкций, за отсутствие 301 на www (как и на слеш), или профита за его настройку не замечено (ссылочное отдельная тема, сейчас про дубли засоряющие индекс).
Проблема "/" по масштабу сопоставимая, чем тащить в индекс 5-15% всего инета, и потом фильтровать, или тупо не показывать, не логичней ли поступить как и с www?
Или считать одной и той же страницей, а в индекс брать как нашел на сайте т. е.
ПС в запросе / не чувствуют
не только для поиска но и для индексации?
---------- Добавлено 09.01.2016 в 17:19 ----------
ПС
Из интереса повторю это
Первой по ходу стояла ссылка со слешем
www.yandex.ru/m
она в индексе и отсвечивает, без слеша - нет или не показывает.
Теперь так
http://www.yandex.ru/m?m
http://www.yandex.ru/m?m/
И на всякий случай
http://www.yandex.ru/m?m?m
Что дублей в индексе не будет и так понятно, посмотреть какие варианты возьмет :)
богоносец, я же не спорю что лучше перебздедь, и тоже запуская новый сайт проверяю редиректы что бы все по феншую.
Вопрос интересен в теории. Ведь нет этих дублей, никто их не видел, хотя бы для молодых, аналогично с www в Гугле, пока ПС основной не определит.
Отсюда и предположение, что индексировать со слешем или без, определяется один раз, для всего сайта, до тех пор пока прямо не будет задано иное через 301, и видимо еще на стадии первичной индексации. Что кстати и для экономии ресурсов куда практичней…
Но вас никто не заставляет, верьте, что будет всё хорошо, и нигде внутри сайта вы по ошибке не сошлётесь куда не надо.
Хорошо, изменю вопрос, думаю не только мне будет интересно, ибо со слешами кажется и правда, дуют на воду, а вдруг кипяток :)
Есть примеры, сайта индексируемого без (или с слешами), и что бы одна/две/пять страниц проиндексировались с слешами (или без)?
В данном случае я не настаиваю что подобного не бывает, но на практике тоже не видел.
Не воспринимайте в штыки, но просто, если и таких примеров никто привести не сможет, то на чем тогда держится уверенность что для ПС это разные страницы?
ПС
Примеры хорошо бы живые, а не в духе
Поставил с дуру 4к ссылок вначале с / потом без. Получил почти 4к дублей. Пол года яндекс выплевывал лишнее после редиректа. Но это было около 3 лет назад.
из воспоминаний многолетней давности
Может ещё скажите, что остальные дубли — не дубли? Очень надо www.yandex.ru/m/?админ
Или есть какое-то принципиальное отличие этого мусора от / на конце?
В мусоре отличий нет, но мы спорим, является ли наличие/отсутствие слеша на конце этим самым мусором, разными страницами для ПС. А вы настойчиво предлагаете примеры со слешем в середине...
В запросе он не чувствует / (и таким запросом индексацию не проверяют)
и у него не та скорость, что у гугла
(и может быть вам понравился мусор в гугл.индексе).
http://www.google.ru/search?q=site:www.yandex.ru/m
Нет там ни одного примера со слешем на конце, а обсуждаем именно его
У ПС есть задача сократить расход своего железа. Они решают свою задачу, а не вашу. Не понятно? Со своей задачей они справляются часто, а с вашей как получится. Правильно получается не в 100% случаев.
Какая разница какие задачи решает ПС, если они совпадают с моими
Как правило вы видите результат уже после отфильтровывания дублей (изредка это может сопровождаться вылетом всего сайта).
Проиндексированные дубли со слешем и без в конце (не в начала или середине), можно все таки увидеть?
И интересно, почему сайт у которого не настроен 301 для слешей должен выпадать из индекса, если конечно рукожопый вебмастер не прочитает о том как важен этот редирект и не полезет его настраивать? :)
Вы хотите чтобы я 7 минут поковырялся и сделал такое? Сделайте сами.
Ну при чем здесь какие-то уникальные ситуации, которые теоретически можно реализовать. Что технически страницы разные, и так понятно, не понятно считают ли ПС их таковыми.
Если у меня по дефолту сайт.ру/розовые-слоны/большие-слоны, без слеша на конце, и нет 301, ПС проиндексируют его со слешем, или в ПС появятся дубли со слешем и без?
Зачем заморачиваться склейкой если ПС и сами это отлично делают?
Опять таки, теоретически можно предполагать что кто то поставит ссылку со слешем. Но здесь кажется нечто аналогичное www и без, но так как реализовано в Яндексе - т. е. - если по дефолту без www, внутренние ссылки без www, то только так он индексировать и будет.
Ну щас попостим, посмотрим..
А с параметрами там уже есть со слешем и без.
А мы уже попостили
Со слешем
Все равно со слешем
Если вы чего не видели, то вполне возможно индексация того сцайта для ПС когда-то оказывалась под вопросом. И автоматическое решение проблемы случайно оказалось таким, как хотелось бы вебмастеру.
А если я уже несколько лет каждый день ковыряю чужие сайты, работа у меня такая. В т.ч. и на предмет настроек индексации. И ни разу за все это время не видел в индексе дубля со слешем и без. Так же как и описанную вами ситуацию, где со слешем и без разный контент.
Это значит что мне везет, или все же ПС сами успешно клеят?
http://www.yandex.ru/m
http://www.yandex.ru/m?туфта
http://www.yandex.ru/m/?дубль
И со слешем, и без, и хернёй в параметрах http://www.google.ru/search?q=site:www.yandex.ru/m
просто подобные страницы олгоритму трудно счесть дулями — они попадают в индекс с разным контентом.
Мы же про слеш в конце, а не в средине урла?
Вот такие дубли
http://www.yandex.ru/m/
http://www.yandex.ru/m
В индексе можно найти?
Нет, не так.
Если у вас со слешем и без него разный контен, то это не дубли.
А так бывает?
Или это уже плавный соскок с еще одного мифа, про дубли со слешем и без, коих в индексе никто не видел? :)
---------- Добавлено 08.01.2016 в 17:00 ----------
И почему настроили 301 с https://www.bizzclick.com/ на https://www.bizzclick.com ?
А его можно настроить?
Вчера дал человеку рефку, он по ней прошел, и пишет - на странице все время что-то перезагружается, экран дергается и ничего не работает, в т.ч. регистрация. А по прямой ссылке зарегистрировался нормально.
Решил проверить, разлогинился и сам перешел по рефке - так и есть, зарегистрироваться не возможно. Сегодня то же самое.