- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
роботы не ходят по ссылкам, а всегда используют закладки
ээээ ..не понял
greenwood, ну, это образно говоря, так сказать поддержать разговор. Раз разговор ведется в терминах "робот пришел по конкретному бэку", то чего странного в выражении "робот пришел из закладок"? Роботы ходят по страницам, которые есть в их базе. Если обнаружена новая страница, то она добавляется в базу. Да тут уже об этом несколько раз сказано.
:p
Если создатель бота поставит цель скрытности и неидентифицируемости на каком-то динамическом принципе - так и будет. Не определить. Однозначно.
Согласен с Лесничком.
Наверное, я невнимательно читал, но гипотезы здесь я никакой пока не увидел.
Не мешай следить за течением мысли... не сбивай его.
Предлагаю вариант - роботы не ходят по ссылкам, а всегда используют закладки, поэтому вопрос о том с какого бэка пришел робот не имеет смысла.
Закладки это типо объяснение в доступной для Дяди Коли форме понятия "список"?
я настаиваю на том, что проследить откуда пришел поисковый бот (в смысле с какого ресурса по беку) можно - по косвенным признакам коррелировать)
Дядь Коль... бот не "ходит"... и не "переходит"... он(о) вызывает адреса из списка.
вызывает адреса из списка.
По порядку? Или есть какое-то ранжирование в этом списке?
По порядку? Или есть какое-то ранжирование в этом списке?
А это уже инсайд...
Дядь Коль... бот не "ходит"... и не "переходит"... он(о) вызывает адреса из списка.
ну вот не надо ..а ?
читай выше ....
лучше скажи: откуда формируется (если так угодно) список ?
На основании чего обновляется список (это важно в данном контексте) ?
C какой переодичностью и почему именно с такой, если такое присутствует ?
А это уже инсайд...
Даже SEботы оставляют следы. В пространстве сайта и во времени посещения. ;)
C какой переодичностью и почему именно с такой, если такое присутствует
Зависит от предыдущей скорости изменения содержания страницы(сайта)???
Закладки это типо объяснение в доступной для Дяди Коли форме понятия "список"?
Нет. Это попытка "коррелировать" идею в стиле дедушки Гинвуда.
По порядку? Или есть какое-то ранжирование в этом списке?
По алгоритму. Аналогия с закладками в браузере не такая уж и плохая. Человек в закладках выбирает страницы тоже не по порядку, а по определенному достаточно сложному "алгоритму". Какие-то страницы смотрит часто, а на некоторых бывает раз в год. Кстати, люди чаще загружают страницы, содержание которых уникально и регулярно обновляется.
Зависит от предыдущей скорости изменения содержания страницы(сайта)???
теплее ... но далеко не факт, как показывает практика :)