Bonjour,
Merci pour l'intêret que vous portez à Logs Data Platform.
Nous n'avons pas encore mis à jour la documentation car nous venons depuis peu de proposer Logstash 6.5 sur la plateforme. En effet chaque logiciel de la suite Elastic ne garantit la compatibilité qu'avec des logiciels de version identique. Maintenant que Logstash 6.5 est disponible sur la plateforme, nous allons pouvoir le mentionner dans la documentation.
Pour revenir au problème que vous évoquez , en effet les modules de Filebeat en 6.5 et 5.6 sont différents. Nous ne supportons pas encore Filebeat 6.5 totalement car les objets imbriqués sont aujourd'hui mal sérialisés par notre codec.
Il est possible d'utiliser Logstash 5.6 et 6.5 sur notre plateforme avec filebeat 6.5 mais elle nécessite bien un changement de configuration pour aller chercher le sous objet filebeat correspondant.
Cela donnerait par exemple (pour apache-access et apache-error)
if [fileset][module] == "apache2" {
if [fileset][name] == "access" {
grok {
match => { "message" => "%{OVHCOMBINEDAPACHELOG}" }
patterns_dir => "/opt/logstash/patterns"
named_captures_only => true
}
mutate {
add_field => { "read_timestamp" => "%{@timestamp}" }
}
date {
match => [ "timestamp", "dd/MMM/YYYY:H:m:s Z" ]
target => "timestamp"
}
}
else if [fileset][name] == "error" {
grok {
break_on_match => true
match => { "message" => "%{OVHHTTPD_ERRORLOG_REFERRER}" }
patterns_dir => "/opt/logstash/patterns"
}
date {
match => [ "timestamp", "MMM dd HH:mm:ss" ]
target => "timestamp"
}
}
}
Cette configuration n'a pas été testé en production (n'hésitez pas à y ajouter vos différents mutate). Dîtes nous si elle n'est pas valide dans votre cas ou vous souhaitez qu'on vous accompagne dans sa complétion.
