genjnat

genjnat
Рейтинг
230
Регистрация
08.10.2008
kazakdona:
Да есть такие страницы которые содержат page и много в других разделах

Проверялка хоть и ругается на недопустимый символ, но страницу распознает как запрещенную.

Так и запрещайте

Disallow: /kms_portfolio+stat+numz-8.html

Потом понаблюдаете, скорее всего благополучно выпадет...

MeGGo:
Ну конечно можно! В .htaccess прописывается правило

А почему оба варианта (inger.com.ua и inger.com.ua/) отдают код 200, и копируя из адресной строки, я получаю inger.com.ua/ ?

богоносец, традиционно исходят из того, что со / и без, для ПС дубли аналогичные вашим примерам, т.е. мусорные страницы которые усложняют индексацию или даже могут повлечь санкции.

Вы пишите в индексе их нет потому что ПС уже отфильтровали.

При этом, необходимость настройки 301, обосновываете тем что фильтрация не идеальная (с чем трудно не согласится), и в качестве доказательства даже приводите примеры кривых ссылок. Но примера индексации дублей со слешем и без, нет ни одного, или ПС ни одного не показывают...

Это ведь само по себе свидетельствует что отношение не такое же как к мусорным страницам, а скорее как к www.

Но дубли www, хоть бы можно увидеть в Гугле, по крайней мере для молодых сайтов. Еще недавно можно было и в Яндексе.

Сейчас, на 100% не настаиваю, но на практике уже больше года не встречал. Видимо пофиксили, и рискну предположить, что еще до индексной базы. Т.е. – нет никакой фильтрации 10 000 дублей (а по факту треть всего инета), есть фиксированная индексация с www или без, и все. И никаких санкций, за отсутствие 301 на www (как и на слеш), или профита за его настройку не замечено (ссылочное отдельная тема, сейчас про дубли засоряющие индекс).

Проблема "/" по масштабу сопоставимая, чем тащить в индекс 5-15% всего инета, и потом фильтровать, или тупо не показывать, не логичней ли поступить как и с www?

Или считать одной и той же страницей, а в индекс брать как нашел на сайте т. е.

богоносец:
ПС в запросе / не чувствуют

не только для поиска но и для индексации?

---------- Добавлено 09.01.2016 в 17:19 ----------

ПС

Из интереса повторю это

Первой по ходу стояла ссылка со слешем

она в индексе и отсвечивает, без слеша - нет или не показывает.

Теперь так

http://www.yandex.ru/m?m

http://www.yandex.ru/m?m/

И на всякий случай

http://www.yandex.ru/m?m?m

Что дублей в индексе не будет и так понятно, посмотреть какие варианты возьмет :)

богоносец, я же не спорю что лучше перебздедь, и тоже запуская новый сайт проверяю редиректы что бы все по феншую.

Вопрос интересен в теории. Ведь нет этих дублей, никто их не видел, хотя бы для молодых, аналогично с www в Гугле, пока ПС основной не определит.

Отсюда и предположение, что индексировать со слешем или без, определяется один раз, для всего сайта, до тех пор пока прямо не будет задано иное через 301, и видимо еще на стадии первичной индексации. Что кстати и для экономии ресурсов куда практичней…

богоносец:

Но вас никто не заставляет, верьте, что будет всё хорошо, и нигде внутри сайта вы по ошибке не сошлётесь куда не надо.

Хорошо, изменю вопрос, думаю не только мне будет интересно, ибо со слешами кажется и правда, дуют на воду, а вдруг кипяток :)

Есть примеры, сайта индексируемого без (или с слешами), и что бы одна/две/пять страниц проиндексировались с слешами (или без)?

В данном случае я не настаиваю что подобного не бывает, но на практике тоже не видел.

Не воспринимайте в штыки, но просто, если и таких примеров никто привести не сможет, то на чем тогда держится уверенность что для ПС это разные страницы?

ПС

Примеры хорошо бы живые, а не в духе

ziliboba0213:
Поставил с дуру 4к ссылок вначале с / потом без. Получил почти 4к дублей. Пол года яндекс выплевывал лишнее после редиректа. Но это было около 3 лет назад.

из воспоминаний многолетней давности

богоносец:

Может ещё скажите, что остальные дубли — не дубли? Очень надо www.yandex.ru/m/?админ
Или есть какое-то принципиальное отличие этого мусора от / на конце?

В мусоре отличий нет, но мы спорим, является ли наличие/отсутствие слеша на конце этим самым мусором, разными страницами для ПС. А вы настойчиво предлагаете примеры со слешем в середине...

богоносец:
В запросе он не чувствует / (и таким запросом индексацию не проверяют)
и у него не та скорость, что у гугла
(и может быть вам понравился мусор в гугл.индексе).

http://www.google.ru/search?q=site:www.yandex.ru/m

Нет там ни одного примера со слешем на конце, а обсуждаем именно его

богоносец:

У ПС есть задача сократить расход своего железа. Они решают свою задачу, а не вашу. Не понятно? Со своей задачей они справляются часто, а с вашей как получится. Правильно получается не в 100% случаев.

Какая разница какие задачи решает ПС, если они совпадают с моими

богоносец:

Как правило вы видите результат уже после отфильтровывания дублей (изредка это может сопровождаться вылетом всего сайта).

Проиндексированные дубли со слешем и без в конце (не в начала или середине), можно все таки увидеть?

И интересно, почему сайт у которого не настроен 301 для слешей должен выпадать из индекса, если конечно рукожопый вебмастер не прочитает о том как важен этот редирект и не полезет его настраивать? :)

богоносец:
Вы хотите чтобы я 7 минут поковырялся и сделал такое? Сделайте сами.

Ну при чем здесь какие-то уникальные ситуации, которые теоретически можно реализовать. Что технически страницы разные, и так понятно, не понятно считают ли ПС их таковыми.

Если у меня по дефолту сайт.ру/розовые-слоны/большие-слоны, без слеша на конце, и нет 301, ПС проиндексируют его со слешем, или в ПС появятся дубли со слешем и без?

Зачем заморачиваться склейкой если ПС и сами это отлично делают?

Опять таки, теоретически можно предполагать что кто то поставит ссылку со слешем. Но здесь кажется нечто аналогичное www и без, но так как реализовано в Яндексе - т. е. - если по дефолту без www, внутренние ссылки без www, то только так он индексировать и будет.

богоносец:
Ну щас попостим, посмотрим..
А с параметрами там уже есть со слешем и без.

А мы уже попостили

Со слешем

Все равно со слешем

богоносец:
Если вы чего не видели, то вполне возможно индексация того сцайта для ПС когда-то оказывалась под вопросом. И автоматическое решение проблемы случайно оказалось таким, как хотелось бы вебмастеру.

А если я уже несколько лет каждый день ковыряю чужие сайты, работа у меня такая. В т.ч. и на предмет настроек индексации. И ни разу за все это время не видел в индексе дубля со слешем и без. Так же как и описанную вами ситуацию, где со слешем и без разный контент.

Это значит что мне везет, или все же ПС сами успешно клеят?

богоносец:
http://www.yandex.ru/m
http://www.yandex.ru/m?туфта
http://www.yandex.ru/m/?дубль

И со слешем, и без, и хернёй в параметрах http://www.google.ru/search?q=site:www.yandex.ru/m
просто подобные страницы олгоритму трудно счесть дулями — они попадают в индекс с разным контентом.

Мы же про слеш в конце, а не в средине урла?

Вот такие дубли

http://www.yandex.ru/m/

http://www.yandex.ru/m

В индексе можно найти?

богоносец:
Нет, не так.
Если у вас со слешем и без него разный контен, то это не дубли.

А так бывает?

Или это уже плавный соскок с еще одного мифа, про дубли со слешем и без, коих в индексе никто не видел? :)

---------- Добавлено 08.01.2016 в 17:00 ----------

MeGGo:
И почему настроили 301 с https://www.bizzclick.com/ на https://www.bizzclick.com ?

А его можно настроить?

Вчера дал человеку рефку, он по ней прошел, и пишет - на странице все время что-то перезагружается, экран дергается и ничего не работает, в т.ч. регистрация. А по прямой ссылке зарегистрировался нормально.

Решил проверить, разлогинился и сам перешел по рефке - так и есть, зарегистрироваться не возможно. Сегодня то же самое.

Всего: 2166