Bonjour,
Merci pour l'intérêt que vous portez à Logs Data Platform.
Concernant les index, leur capacité en taille dépend de l'option liée comme vous l'avez deviné.
- A la création de ceux-ci, vous avez la possibilité d'être notifié par email lorsque le volume de l'index atteint 80%, 90% et 100% de sa capacité.
- Lorsque la limite est atteinte, nous ne permettons plus l'insertion de nouveaux documents. Nous ne supprimons aucune données.
Une fois le seuil atteint, vous avez plusieurs possibilités :
- Alléger l'index vous-même en supprimant des documents https://www.elastic.co/guide/en/elasticsearch/reference/6.8/docs-delete-by-query.html ce qui vous permettra de redescendre sous le seuil.
- Commander une option d'index avec une plus forte capacité, puis transférer l'ensemble des documents vers celui-ci. Logstash configuré en in/out ES fait ça très bien.
- Faire du "rolling". C'est à dire commander un nouvel index ou écrire les nouvelles données, puis lier l'ensemble de ces index avec un alias, afin de vous permettre de lire sur l'ensemble des données.
La notion de dépassement de 2 € HT/mois/GiB ne s'applique que sur les flux de données (la pipeline LDP classique) et non les "index as a service".
Nous allons mettre à jour notre documentation https://docs.ovh.com/fr/logs-data-platform/index-as-a-service/ pour clarifier ces aspects.
Bien cordialement,
