Kafka 0.10 with SASL and SSL

[ThibaultR]

Bonjour,

OVH Kafka est désormais disponible en version 0.10.0.1 avec le support du SASL pour l'authentication et du SSL pour le chiffrement.

Kafka 0.10.0.1 et SASL/SSL sont disponibles dans les régions OVH suivantes : BHS, GRA, SBG et RBX.

Le nouveau système d'authentification introduit les notions de rôles, utilisateurs et droits fins. Il est maintenant possible de donner des droits fins en lecture et/ou en écriture sur un ou plusieurs topics pour un utilisateur donné

Un tutoriel est disponible ici pour découvrir comme créer des rôles, utilisateurs et droits fins via l'APIv6 :
- https://community.runabove.com/kb/en/queue/kafka-sasl-ssl.html

Les exemples de code en Go, Python, Node.js et Java ont été mis à jour avec la configuration nécessaire pour le SASL/SSL :
- https://github.com/runabove/queue-examples

Petit rappel : il est aussi possible de produire et consommer des messages dans OVH Kafka via HTTPS :
- https://community.runabove.com/kb/en/queue/dbaas-queue-https.html

L'ancien système d'authentification basé sur une clé (utilisée comme client.id Kafka) va être déprécié. Il reste disponible sur le port 9092, tandis que le SASL est disponible sur le 9093.

--
Thibault, OVH

[CM63]

Bonjour,

Merci pour l'info. Existe-t-il une présentation en français de Kafka?

[ThibaultR]

Kafka est une plateforme de messagerie pub/sub distribuée hautement scalable où :

• Des producteurs produisent (écrivent) des messages dans des fils d'attente (topics).
• Des consommateurs consomment (lisent) les messages de ces fils d'attente.
• Tous les messages écrits sont persistés, ils peuvent dont être consommés plusieurs fois.

Pourquoi utiliser Kafka ?

• Découpler des systèmes : si 'A' appelle 'B' et que 'B'est indisponible, 'A' va avoir un problème. Solution : 'A' produit dans Kafka et 'B' consomme la donnée produite par 'A' dans Kaka).
• Supporter des débits très importants pour écrire ou lire des données : Kafka support de très gros débits. Utiliser Kafka en frontal de votre infra permet d'encaisser des pics et de protéger votre infra placée derrière
• Supporter la consommation de flux de données par des consommateurs multiples
• Consommer des messages en temps réel et/ou en mode batch : de par son protocole binaire, Kafka offre une latence très faible et permet de la consommation temps réel
• Bâtir des architectures event-driven

Il y a un bon article de présentation de Kafka écrit par Xebia ici.

[FabL]