- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Что обозначает вот это посещение робота? Робот получается просто зашёл на сайт и ни чего не скушал?
[08/Dec/2007:16:46:11 +0000] "GET / HTTP/1.1" 200 29538 "-" "Yandex/1.01.001 (compatible; Win16; I)"
Просто если сравнить с таким вот запросом:
[08/Dec/2007:19:22:18 +0000] "GET /page/2/ HTTP/1.1" 200 29597 "-" "Yandex/1.01.001 (compatible; Win16; I)"
Получается робот прошёл по странице - /page/2/ во втором варианте..
Подскажите плиз.. Просто раньше в логи не заглядывал, а теперь решил чуть разобраться.. :o
Да. Все верно. Это основной бот-индексатор Яндекса ходит по страничкам и добавляет их в базу.
После следующего апдейта страничка либо появится в индексе (если раньше там отсутствовала), любо обновится, если с последнего посещения робота яндекса она была изменена
HTTP/1.1" 200 - если здесь стоит значение 200, значит страничка найдена и успешно добавлена роботом в базу, если здесь другой код, возможно возникла ошибка при обращении бота к данному файлу.
Распространенные ошибки: 301, 302 - перенаправления, 404 - страничка не найдена, 403 - доступ к страничке запрещен сервером.
После следующего апдейта страничка..., страничка не найдена, доступ к страничке
/Оффтоп/
Ник lucky-romantic оправдывает вашу романтичность в словах. :)
и ни чего не скушал?
[08/Dec/2007:16:46:11 +0000] "GET / HTTP/1.1" 200 29538 "-" "Yandex/1.01.001 (compatible; Win16; I)"
Скушал морду сайта. Получил 29538 байт.
Ник lucky-romantic оправдывает вашу романтичность в словах. :)
И не только в словах, но и в делах. ;)
lucky-romantic. Спрашивают одно, а отвечаем другое?