- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Что делать, если ваша email-рассылка попала в спам
10 распространенных причин и решений
Екатерина Ткаченко
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Counselor, видели хоть раз сервисы скриншотов для страниц? это то же самое - работа браузера.
робот пс не эмулирует работу браузера, а просто забирает код отдаваемый сервером :)
замечательно, только я смотрю логи сервера - нет там обращений к данным папкам от пс, только от браузеров пользователей
Как вы отличаете ботов от пользователей? Уж не по полю ли user-agent? :)
выполнит код браузер, а не пс
ПС могут отлично эмулировать выполнение.
Вы об xss слышали? )
это тут причём?
робот пс не эмулирует работу браузера, а просто забирает код отдаваемый сервером
Обычный бот - конечно не будет, это было бы верхом расточительства ресурсов. А раз в недельку забегает толстобот, что ли. :) Он замечательно может пропарсить сайт с яваскриптом. Моё сугубое ИМХО.
http://devaka.ru/articles/complex-javascript-for-google
ознакомьтесь, думаю вопрос сразу решиться
Тут поставили эксперименты и описаны все предложенные варианты.
PS опередили.
Как вы отличаете ботов от пользователей? Уж не по полю ли user-agent?
т.е вы желаете сказать, что при обращении к странице с user-agent бота пс, найдя на странице подключаемый js робот автоматически меняет IP user-agent и обращается к закрытой от индексации папке?
нет таких обращений в логах!
как и нет обращений напрямую к папке без обращения к странице, так же нет повторных скачиваний закрытых файлов при внутренних переходах, т.к. всё уже есть в кеше браузера :)
т.е вы желаете сказать, что при обращении к странице с user-agent бота пс, найдя на странице подключаемый js робот автоматически меняет IP user-agent и обращается к закрытой от индексации папке?
нет таких обращений в логах!
как и нет обращений напрямую к папке без обращения к странице, так же нет повторных скачиваний закрытых файлов при внутренних переходах, т.к. всё уже есть в кеше браузера
Нет, я хочу сказать, что боты поисковых систем иногда маскируются под браузеры. Где вы видели чтобы я выше писал про автоматическую смену IP?
P.S. Статья выше - как раз в тему.
это тут причём?
При том, что если в гугл вебмастерс код выполняется из браузера, как вы выразились, можно утащить куки пользователя запустившего скрипт.
что боты поисковых систем иногда маскируются под браузеры.
да, но при этом не выполняют JS!
маскировка !=== работе браузера!
Toy, вы вообще о чем? какие куки???
они-то здесь причём?
burunduk добавил 27.09.2011 в 17:05
P.S. Статья выше - как раз в тему.
ну так там как раз и написаны условия при которых вывод с помощью js не как не индексируется, а именно внешний js в папке закрытой от индексации в роботсе :)