Недавние события, связанные с обнародованием закрытой информации на страницах мировых поисковиков, вызвали нешуточные волнения в среде пользователей, которые теперь стали гораздо более осмотрительно вести себя в сети. Так, на форуме Google Webmaster Help владелец сервисов электронной коммерции выдвинул на обсуждение следующий вопрос: «Насколько безопасным может быть взаимодействие кнопки Google +1 с файлом robots.txt?»
Прежде всего, участника форума интересовал следующий момент: если робот Google заблокировал контент, размещенный на странице или же информация была удалена с использованием мета-тэга noindex, однако, при этом, пользователь кликнул по кнопке +1 - будет ли такой контент проиндексирован поисковой системой?
Кроме того, онлайн-предпринимателя, предлагающего некий «продукт электронной коммерции», связанный с активными редиректами и многочисленными прохождениями по ссылкам волновало, можно ли скорректировать рейтинг страницы-источника при помощи кнопки Google +1, если обычно она не индексируется. Как оказалось, сомнения пользователя разделяют и другие участники форума.
Чтобы окончательно развеять их, к дискуссии подключилась Дженни Мерфи, сотрудница корпорации Google. Она ответила следующее: «Кнопка +1 взаимодействует с robots.txt и другими директивами в весьма необычной форме. Так как кнопка +1 может быть применена и для закрытых страниц, во время клика пользователя по кнопке, алгоритм посещает эту страницу, чтобы определить, является она публичной или нет. Отмечу, что данная проверка игнорирует директивы для роботов, но, при этом, не влияет на взаимодействие поисковых роботов Google с файлом robots.txt».
«То, что запрещено в robots.txt - недоступно для общего индекса. Однако в случае редиректа - не все так просто, ведь просмтор исходной страницы может быть разрешен элементом ссылки rel="canonical", который призван указывать точный URL-адрес предпочтительного для индексации домена», - заключила Дженни Мерфи.
Таким образом, вебмастерам остается пожелать только одного: быть внимательнее.