- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
В 2023 году Одноклассники пресекли более 9 млн подозрительных входов в учетные записи
И выявили более 7 млн подозрительных пользователей
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Хотел временно удалить сайт из каталога Яндекса. Сапорт Яндекса посоветовал возращать код отличный от 200 роботу каталога, который проверяет ресурсы на "живость". Уважаемые господа, подскажите какое имя этого робота? Что бы, не дай Бог, не выдать такой код индексатору и не вылететь из индекса вообще.
-а зачем?
-а зачем?
Эксперимент. Если получится - расскажу о результатах.
Уважаемые господа, подскажите какое имя этого робота? Что бы, не дай Бог, не выдать такой код индексатору и не вылететь из индекса вообще.
Да это вобщем-то взаимосвязанный вещи. Для каталога отдельного бота нет.
Да это вобщем-то взаимосвязанный вещи. Для каталога отдельного бота нет.
Не думаю. Цитата из Правил регистрации в Каталоге: "...Ежедневно сайты, размещенные в каталоге, проверяются на живость специальной программой-простукивалкой. Если более трех раз приходит отклик, отличный от 200, то сайт снимается с публикации. При этом из базы сайт сразу не удаляется, и при получении простукивалкой нормального отклика (статус 200) автоматически возвращается на публикацию..."
Ни на одном своем сайте, размещенном в каталоге я ниразу не видел никого от яндекса кроме стандартных ботов с литерами D,M,H,I.
Такое возможно если только каталожный бот ходит не под яндексовским юзер агентом, а это врядли ИМХО.
Я видел бота с литерой P, что за зверь за такой ?
P - от слова Picture. Нетрудно догадаться, т.к. он кроме robots.txt берет только картинки ;).
Это не бот, это программа-чекер. Ее user-agent:
Mozilla/4.0 (compatible; MSIE 5.0; YANDEX)
Делает GET / для сайтов из YACA примерно раз в сутки.
Да в общем-то ровно в раз в сутки. Причем либо в 23 с чем-то, либо с 4 до 6 утра. По крайней мере у меня на всех сайтах за которыми слежу именно так. :)
Это не бот, это программа-чекер. Ее user-agent:
Mozilla/4.0 (compatible; MSIE 5.0; YANDEX)
Делает GET / для сайтов из YACA примерно раз в сутки.
Ниразу такого не видел. Может и есть такой чекер, но делает он тогда не GET, а HEAD. Просто отклик проверяет, потому и в статистике не замечен, но в логах сервера должен быть.