Как гугл так полно индексирует?

12
goliafz
На сайте с 16.07.2008
Offline
94
815

CMS DLE. Гугл каким-то образом проиндексировал пользователей. Комментариев на сайте нет, списка пользователей тоже нет. Ни одной ссылки на пользователей нет.

Каким образом гугл проиндексировал профили?

VertuOzz
На сайте с 20.07.2010
Offline
123
#1
S
На сайте с 29.04.2012
Offline
7
#2
goliafz:
CMS DLE. Гугл каким-то образом проиндексировал пользователей. Комментариев на сайте нет, списка пользователей тоже нет. Ни одной ссылки на пользователей нет.

Ну значит таки есть, как по-другому? Покажите сайт.

Подпись не продается
goliafz
На сайте с 16.07.2008
Offline
94
#3
Stremantino:
Ну значит таки есть, как по-другому? Покажите сайт.

Нет. С DLE работаю уже несколько лет и умею запрещать ненужное от индексации. Яндекс естественно ничего этого не видит, т.к. ссылок нет.

Поэтому и интересно где он смог откапать эти ссылки. Ведь кроме как с мускла выдрать ссылки других вариантов и нет. Хотя возможно гугл с помощью специальных команд через поиск сайта получает профили.

greenlen
На сайте с 30.05.2011
Offline
117
#4

Гугл индексирует все😂

VertuOzz
На сайте с 20.07.2010
Offline
123
#5

В качестве версии, Гугл, зная структуру распространенных CMS, может индексировать разделы, никак не обозначенные на сайте

goliafz
На сайте с 16.07.2008
Offline
94
#6
VertuOzz:
В качестве версии, Гугл, зная структуру распространенных CMS, может индексировать разделы, никак не обозначенные на сайте

Но фишка в том, что если перейти в раздел user, то список пользователей нельзя получить. Значит гугл каким-то неведомым мне способом собирает ссылки на профили.

vandamme
На сайте с 30.11.2008
Offline
675
#7

он даже в исходном коде страницы закомментированные url берет

The WishMaster
На сайте с 29.09.2005
Offline
2542
#8
goliafz:
Значит гугл каким-то неведомым мне способом собирает ссылки на профили.

Сложно догадаться, что он знает вид ссылок на профили?:)

Кому старенького креативного копирайтера? Тематики - туризм, СЕО, творчество, кулинария, шизотерика :)
Нямкин
На сайте с 02.12.2010
Offline
65
#9

Серфинг с помощью Хрома и др. браузеров со spy-приблудами очень помогает в нахождении контента, на который нет ссылок.

goliafz
На сайте с 16.07.2008
Offline
94
#10
The WishMaster:
Сложно догадаться, что он знает вид ссылок на профили?:)

Конструкцию то он может знать, но где последнюю часть в виде логина то берет? Наугад что ли?

Урлы ведь такого вида: http://site.ru/user/login/

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий