Pour CS les scénarios sont assez simples à utiliser.
Pour screamgfrog on part du principe qu'on utilise ce genre de tools uniquement sur ses sites, et dans ce cas on crée une rule pour whitelister son IP.
Sinon il est possible de whitelister le bot pour éviter qu'il se fasse ban (j'ai du le faire pour 1 client), à mettre dans /etc/crowdsec/parsers/s02-enrich/
name: si/whitelist-screaming-frog
description: "Whitelist access on user agent Screaming Frog SEO Spider"
whitelist:
reason: "Access from Screaming Frog SEO Spider"
expression:
- "evt.Meta.log_type == 'http_access-log' && evt.Parsed.http_user_agent contains 'Screaming Frog SEO Spider'"
@hapx : Intéressant je vais jeter un oeil.