alexverem

Еще совсем недавно, советы были однозначны - для начала заблочить всех с IPv6, получается сейчас все сложнее.

Я прочитал достаточно много инфы по фильтрации ботов через CloudFlare, начиная от мануала от Ивана Зимина, заканчивая разгромной статьей его стратегии от анти ддос )

Все друг другу противоречат.. может кто поделится в двух словах стратегией, на которой остановились в последнее время? Может где-то тут в топиках кто нибудь писал, или в блоге каком. Почитаю..

Тут были советы по отключению IPv6 Compatability в CF для борьбы с ботами, этот шаг по прежнему актуальный?

То есть по прежнем большинство ботов работают на IPv6 и реальные пользователи не будут отрезаны, то есть будет для них задействован  IPv4?

резонный вопрос тогда, а как? )

через правило CF и не через block а скажем с капчей? или сложнее как-то?

П.С. просто тут много в топике советовал именно отключить эту опцию (IPv6 Compatability), и никаких дисскусий в топике особо не встречал..

Мануалов много разных по фильтрации ботов в интернете, они разной свежести и адекватности )

Может кто сможет кинуть ссылочку на последние наработки, или может на страницу в этом топике, где они описаны..

Начал процесс фильтрации ботов через CF, лучше поздно чем никогда )

Читаю топик, буду делать постепенно. Через API отключил  поддержку IPv6.

Последние несколько страниц топика были немного о другом, поэтому уточняю..  этот шаг по прежнему актуальный?

То есть по прежнем большинство ботов работают на IPv6 и реальные пользователи не будут отрезаны, то есть будет для них задействован  IPv4?

Спасибо большое! Проверил, добавил. Через сколько примерно яндекс выкинет из индекса дубли?

Если мне нужно для всех урл на сайте не учитывать placeid и monthid, то что в robots нужно поместить?

То есть для таких урл:

site/kitaj/mart/?placeid=kitaj&monthid=3

site/kitaj/?placeid=kitaj

site/spain/mart/?placeid= spain &monthid=3

site/spain /?placeid= spain

И так далее..

То есть пути могут быть разные, но где бы не встречался placeid или monthid их не нужно учитывать

Предположу:

User-agent: Yandex
Clean-param: placeid /*
Clean-param: monthid /*

Хотя возможно нужны звездочки для шаблонов для того чтобы учитывались вложенные пути?

User-agent: Yandex
Clean-param: placeid /*/
Clean-param: placeid /*/*/
Clean-param: monthid /*/
Clean-param: monthid /*/*/

В яндекс примерах просто не нашел аналогичного случая (yandex.ru/support/webmaster/robot-workings/clean-param.html).. 

отдает 404, значит ничего не надо делать, ок спасибо

Да 404.. 

Почитал про подклейки, в основном я так понял это делают при получении дропдоменов..

или злоумышленники тоже занимаются? чего они добиваются и что мне можно сделать?

Проверку на взлом с чего стоит начать? С поиском последний измененных файлов? Что-то еще?