- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах
Это на 45% больше, чем в 2022 году
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Ходил "Yandex/1.01.001 (compatible; Win16; I)" себе, ходил и вдруг... Резко сменил тактику.
Делает 2 запроса: robots.txt + еще 1 страничку и пауза.
И опять повторяется...
А тут еще и "YaDirectBot/1.0" выдал!
Есть странички, классика CGI с параметрами: /page.name?Param1=Value1&Param2=Value2
Этот бот делает обычный запрос и тут же 2 еще:
1. /page.name?Param1=Value1 - 200, что быть и должно.
2. /page.name?Param2=Value2 - 404, что естественно.
В схеме навигации Param2 без Param1 - не существует...
---------
Такое - впервые вижу...
А тут еще и "YaDirectBot/1.0" выдал!
di_max, а человеки перед этим по этим URLам не пытались ходить?
di_max, а человеки перед этим по этим URLам не пытались ходить?
Да нет. Интереснее, что с этого же IP перед этим и обычный робот был.
Могла и ошибка в боте быть, Юзер-Агент поменять дело простое или просто забыли сменить.
(Как оно уже было)
Если это еденичный случай, то "ну и ладно", а если распространено - выводы интересные.
Может они ищут незначащие параметры в строке запроса, чтобы дубли не качать или за сапу ловят. :)
В рассылке г-на Ашманова было сказано, что новый алгоритм уже введен. И можно предположить, что это его последствия. Но, думаю, что надо чуть подождать. Потому что АП-ы уж больно странно происходят, индексация новых страниц медленно идет...Шаманство одним словом. Но за идею спасибо. Будем думать!🚬
di_max, а человеки перед этим по этим URLам не пытались ходить?
Денис, я в панели вебмастера в разделе ошибок часто встречаю такие приколы на многих сайтах...
Урла не где нет и не пытались по ним перейти люди..Такое чувство что это не просто боты а искуственный интелект:) Они пробуют подбирать урл, генерируя новый урл из частей существуещего...Что-то ищат?🙄
А теперь вспоминаем темку в которой говорилось, как на половине движков сайтов легко проверить саповские ссылки;)
ДА бы быть не голословным....
URL Дата последнего изменения Дата последнего посещения
/2007/09/11/engine/rss.php
Найдено по внутренней ссылке
/2007/09/17/engine/opensearch.php
Найдено по внутренней ссылке
/2007/09/17/engine/rss.php
Найдено по внутренней ссылке
/2007/09/17/index.php?do=addnews
Найдено по внутренней ссылке
/2007/09/17/rss.xml
Найдено по внутренней ссылке
/2007/09/18/engine/opensearch.php
Найдено по внутренней ссылке
/2007/09/18/engine/rss.php
Найдено по внутренней ссылке
/2007/09/18/index.php?do=addnews
Найдено по внутренней ссылке
/2007/09/18/rss.xml
Найдено по внутренней ссылке
/2007/09/19/engine/opensearch.php
Найдено по внутренней ссылке
/2007/09/19/engine/rss.php
Найдено по внутренней ссылке
/2007/09/19/index.php?do=addnews
Найдено по внутренней ссылке
Таких внутренних ссылок нет
Вот еще пример.
Найдено по внутренней ссылке
/messages.php?msg_send=12
Найдено по внутренней ссылке
/messages.php?msg_send=14
Найдено по внутренней ссылке
/messages.php?msg_send=15
Найдено по внутренней ссылке
/messages.php?msg_send=16
Найдено по внутренней ссылке
/messages.php?msg_send=17
Найдено по внутренней ссылке
/messages.php?msg_send=18
Найдено по внутренней ссылке
/messages.php?msg_send=25
Найдено по внутренней ссылке
/messages.php?msg_send=28
Найдено по внутренней ссылке
/messages.php?msg_send=30
Найдено по внутренней ссылке
/messages.php?msg_send=33
Найдено по внутренней ссылке
/messages.php?msg_send=34
Найдено по внутренней ссылке
/messages.php?msg_send=36
Найдено по внутренней ссылке
/messages.php?msg_send=37
Найдено по внутренней ссылке
/messages.php?msg_send=38
Найдено по внутренней ссылке
/messages.php?msg_send=4
Найдено по внутренней ссылке
/messages.php?msg_send=41
Найдено по внутренней ссылке
/messages.php?msg_send=42
Найдено по внутренней ссылке
/messages.php?msg_send=46
Найдено по внутренней ссылке
/messages.php?msg_send=47
Найдено по внутренней ссылке
/messages.php?msg_send=48
Найдено по внутренней ссылке
/messages.php?msg_send=49
Найдено по внутренней ссылке
/messages.php?msg_send=5
Найдено по внутренней ссылке
/messages.php?msg_send=50
Найдено по внутренней ссылке
/messages.php?msg_send=51
Такие ссылки есть..Но сайт пустой и там даже 3 х личных сообщений нет:)
Такое чувство что это не просто боты а искуственный интелект:) Они пробуют подбирать урл, генерируя новый урл из частей существуещего...Что-то ищат?🙄
А теперь вспоминаем темку в которой говорилось, как на половине движков сайтов легко проверить саповские ссылки;)
Первая мысль была в этом направлении.
Но... Ни САПы на этих страницах нет, ни внешних ссылок вообще, кроме "счетчиков".
А они - в открытую пописаны.
В общем - Эра хитроу(ж)ных Ынтилектов наступает. ;)
Первая мысль была в этом направлении.
Но... Ни САПы на этих страницах нет, ни внешних ссылок вообще, кроме "счетчиков".
Сегодня нет - завтра есть;)
В общем - Эра хитроу(ж)ных Ынтилектов наступает. ;)
Эволюция🚬
Подобное начал замечать с января...
Сегодня нет - завтра есть;)
Привентивная атак Яндекса на потенциальные САПо-площадки.;)
- Сэр! Снимаю шляпу!
PS: - А вот дулю им! ☝И САПе и Яндексу.😆