- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Обнаружил в логах таких товарищей:
crawl22.googlebot.com
crawl23.googlebot.com
crawl25.googlebot.com
crawl26.googlebot.com
Шарят наряду со ставшими уже привычными
crawler10.googlebot.com - crawler14.googlebot.com
Не возвращение ли это старого доброго дип-бота?
Кроме crawler10.googlebot.com - crawler14.googlebot.com
ко мне вчера еще и crawler15.googlebot.com (64.68.82.195) заходил.
Налетели толпенью с 22х ip, забрали за 8 секунд не более 3х страниц на брата ...
Может это просто оптимизированый метод индексации? А crawl22-26 всего-лишь новенькие в "модемном" пуле :D
crawler10.googlebot.com
crawler11.googlebot.com
crawler14.googlebot.com
Как-то странно вот эти у меня на счетчике отбиваются. У меня такое когда-то было со склеивающим ботом Яндекса. Началось это с субботы.
Что это значит? Можно поподробнее?
Двадцатые были давно уже...
Я в разделе "Yandex, Rambler и другие поисковики Рунета" уже такой вопрос задавал. Есть ссылка на скрипт например поиска в каталоге, где ведется статистика запросов. В базу записывается дата, время, поисковый запрос и ip с которго он делался. Так вот раньше, если смотреть по логам сервера, пауки ходили по эти ссылкам, но в статистику не записывались. А тут в субботу Яндекс и Гугл отбились в базе. Вот они:
glagol.yandex.ru
ya.yandex.ru.
и
crawler10.googlebot.com
crawler11.googlebot.com
crawler14.googlebot.com
На счет Яндекса я спрашивал здесь --
Это вопрос скорее всего не по Яндексу или Гуглю, а вопрос к тому, кто эту "отбивалку" писАл.
В том-то и дело, что были давно и были дип-ботами. Потом на несколько месяцев пропали. А теперь вот опять всплыли.
Поисковый запрос передается GET'ом. Во время поиска в базу записывется информация. Дело в том что раньше такого не было. Хотя пауки по ссылкам ходили.
Поисковый запрос передается GET'ом. Во время поиска в базу записывется информация. Дело в том что раньше такого не было. Хотя пауки по ссылкам ходили.
Я чего-то не понимаю ?
в дополнение к 10,14 и 26-м приходили еще впятницу
crawler13.googlebot.com (64.68.82.137)
crawler11.googlebot.com (64.68.82.38)