Mike_Kharkov

Рейтинг
3
Регистрация
25.05.2012
VertuOzz:
Да, а еще для серверов (если речь идет о php, например)


при помощи регулярных выражений и языка гипертекстовой разметки, я полагаю:)

Вот это будет вашим домашним заданием🍿

Большое Спасибо!

VertuOzz:
Как и любой скрипт - загружает страницу по ссылке и распарсивает ее на составляющие

Но скрипт это ведь язык для браузеров? (если речь идёт о javascript)

(Перед этим было сказано что роботы к браузеру никакого отношения не имеют.)

Как робот эту ссылку находит? (она должна обязательно существовать на том сайте на котором он на данный момент находиться?)

The WishMaster:
Я снова задам вопрос. Mike_Kharkov, а какие каналы передвижения по инету ты знаешь?

Как пользователь - не знаю ни одного канала передвижения, кроме браузеров...

(поэтому и пытаюсь добиться хоть каких нибудь ответов.)

splish:
Робот - это код, который парсит информацию с помощью специальных функций.

Это я понимаю. Но меня интересует как он её собирает?

То есть: каким каналом передвижения(по инету) он пользуется переходя от одного адреса к другому?

The WishMaster:
А зачем нужен броузер, чтобы загрузить страницу? O_o

Я задаю вопросы а вы вместо ответов свои вопросы задаёте?

Меня интересуют ответы на вопрос находящийся 2-мя постами выше...

iren K:
тс чей-то клон и троллит тут своими "роботами"

Не совсем вас понял?

---------- Добавлено 08.07.2012 в 19:53 ----------

iren K:
тут читаем

Меня не это интересовало, а то как без помощи браузера роботы собирают информацию?

Каким образом они её видят?(сканируют)

Тоесть:

Они же передвигаются без помощи браузеров каким то образом по паутине?

The WishMaster:
Нафига роботу браузер? O_o

Ну тогда буду благодарен если дадите ссылку на источник о том, как именно робот собирает инфу?

То есть я понимаю, что сначала он берет её в хранилище а затем исходя из его содержимого и происходит выдача.

bon_eur:

Почитайте про User-Agent, для начала хелп Яндекса.

Я прочитал - но там не говориться о том заходит ли робот с одного браузера или со всех подряд?

---------- Добавлено 08.07.2012 в 19:29 ----------

kimberlit:

Как ноиндекс в браузере работает? В чём это проявляется?

Мне непонятен ваш вопрос? (можете конкритезировать?)

P.S. Если отвечать на него прямо - то тогда ответ такой:

запрет индексации в глазах яндекса...

kimberlit:
А должен что ли работать?

Я не знаю, поэтому и спрашиваю?

Если в IE-9 работает - то почему в более низших версиях не должен?

И если он в них не работает то как он тогда скрывает инфу от индексации?

И ещё вопрос:

Поисковики сканируют сайты со всех браузеров или с какого то одного?

bon_eur:
Справа внизу каждого сообщения.

Вижу всего 3 кнопки...

Может у меня аккаунт молодой и благодарить не могу?

jpg 333.jpg
12
Всего: 16