Представьте себе большое количество однотипных страниц, логически разбитых по определенным категориям. То есть одна и та же страница может принадлежать разным категориям.
Пользователь, используя ПС перешел на конкретную страницу по некоторому запросу.
Очень полезно вывести ему ссылки на похожие страницы, находящиеся в интересующей пользователя категории. Для этого я проанализирую запрос, по которому он вышел на исходную страницу (т.е. реферер), и выведу ему список релевантных страниц, куда он еще может перейти.
По-моему это очень полезный и удобный механизм, который наверняка используется на многих сайтах. Поэтому отказываться от этого, только из-за боязни что ПС меня не правильно поймут, я не хочу и не буду.
А как проверяют на клоакинг? Просветите пожалуйста.
Боты в логах прекрасно видны, о чем вы. Допускаю возможность, что иногда боты ПС как-то шифруются под людей, хотя не очень в это верю. Даже если это так, то врят ли ПС отслеживают отличается ли выдача в зависимости от реферера. И даже если это допустить, то не вижу причины банить за это сайт, если сделано это исключительно для пользы посетителей сайта.
Ну ждите. Я параноей не страдаю. А сайт будет удобным и полезным. Это и есть моя цель. Даже если его и забанят.
Думаю поисковые боты не делают переходов по ссылкам. Страницы скачиваются, из текста выделяются ссылки, анализируются, а уже потом по ним приходит бот.
Точно не знаю, но ко мне пока такие не приходили (или хорошо маскируются).
У меня сделана своя статистика, ведется полное логирование всех обращений к сайту, в том числе отслеживается реферер.
Судя по этим данным данным, с рефером приходят люди с поисковых систем, либо переходом по ссылкам. Для ботов реферер всегда пустой (по крайней мере у меня).
Спасибо за поддержку! ;)
Да пусть хоть по рекламе кликают ))
Я ничего не нарушаю, а потому не хочу отказываться от механизма, удобного для моих пользователей.
Прятаться с помощью джаваскрипта тоже не буду, как раз по этой причине.
Какой?
Я ничего не нарушаю, поисковые системы не спамлю, выдача разного контента по реферу полезна для пользователей. Подобными приемами пользуется множество сайтов (в т.ч. yandex). А потому я буду делать все так, как запланироавал.
Если же последуют санкции со стороны ПС, в чем я лично очень сомневаюсь, буду объяснять причины и отставать свои права.
Если бы я выдавал контекст в зависимости от ip, тогда можно было бы попасть под общую раздачу, т.к. это неявный клоакинг в чистом виде. У меня же заисимость от рефера. Вот когда боты и простукивалки начнут ходить с реферером, подумаю об этом еще раз.
Ага, посмотрел. Нашел вот сайтик один, yandex.ru называется. Выдает разный контент в зависимости от входящего ip. Клоакинг понимаешь... куда на них пожаловаться? :)
Тоже так думаю. Буду делать как и запланировал. Всем спасибо за комментарии.
Названия как раз одинаковые, превьюшки прсото лежат в отдельной папке. Поэтому на дополнительных посетителей рассчитывать не приходится.
Закрою таки превьюшки, по-логике не надо их индексировать.
У нас классификатор услуг генерится автоматически, на основе словаря с применением элементов лингвистики. Много других особенностей. Ни одна CMS и близко не подошла.
Да и не хотелось в чужом коде ковыряться.
