Kafka Streams & Confluent KSQL

Fondamentaux

• Les logs
• La réplication des logs
• Les concepts de Topics, Partitions et de Segments
• Kafka Streams
• Dualité entre les notions de Stream et Table• Stream–Table Dualism
• Les jobs de Stream Processing

Cas d'utilisation de KSQL

• Pourquoi KSQL
• Exemples de cas d'utilisations
• KSQL et licensing

Vue d'ensemble de KSQL et écosystème

• KSQL & Kafka = Easy
• Utilisation interactive de KSQL
• Architecture de KSQL
• KSQL CLI
• Les modes serveur de KSQL
• KSQL et Confluent Control Center (C3)

Utiliser KSQL

• Kafka Streams et Tables
• Message Kafka et Formats de données
• Manipulation et agrégation de données
• Fonctions définies par l'utilisateur (UDF)
• Enrichissement des données et jointures
• Agrégations fenêtrées (Windowed opération)
• Métrique et observabilité
• Tests et Monitoring
• Astuces, pièges et limitations

Déploiement et utilisation de KSQL

• Les bonnes pratiques et patterns
• Sécuriser KSQL
• Élasticité et évolutivité
• Tolérance aux pannes
• Healthcheck

Architecture de Kafka Streams

• Motivation et évolution
• Les caractéristiques
• Liberté de choix

Kafka Streams Application Anatomie

• Anatomie d'une application Streams
• Configuration d'une,'application Streams
• Topologie d'une application Streams

Kafka Streams DSL

• Opérations Stateless et Stateful
• Kafka Streams DSL
• Les opération de type fenêtre glissante
• L'API processeur

Test des applications Kafka Streams

• Les catégories de test
• Tests unitaires
• Tests d'intégration avec Test Driver et Kafka embarqué

Surveillance des applications Kafka Streams

• Utilisation de la surveillance basée sur JMX
• Utilisation de Confluent Control Center pour la surveillance

Sécurisation des applications Kafka Streams

• Pourquoi la sécurité est nécessaire
• Aperçu de la sécurité
• Fonctions de sécurité côté client
• Les ACLs requis
• Chiffrement des données en transit

Dimensionnement et mise à l'échelle des applications Kafka Streams

• Scalabilité et élasticité
• Définir le nombre d'instances par application
• Gestion de la mémoire
• Dimensionnement et positionnement des tâches
• Stateless vs Stateful
• Troubleshooting

Utilisation de l'API KSQL REST

• Exemples de requête
• Exemples de réponse

En amont de la formation, les stagiaires reçoivent un questionnaire permettant de mesurer leurs attentes, leurs compétences et leur niveau à l'entrée de la formation. Ce questionnaire est conçu pour recueillir des informations précieuses sur le parcours professionnel des participants, leurs motivations personnelles ainsi que les compétences spécifiques qu'ils souhaitent développer. Cela permet aux formateurs d'adapter le contenu de la formation en fonction des besoins identifiés.

Tout au long de la formation, la progression et l'atteinte des objectifs pédagogiques des stagiaires sont évaluées, au travers de :

• travaux pratiques, qui incluent des exercices concrets permettant d'appliquer les connaissances théoriques acquises dans un contexte réel.
• échanges entre pairs, favorisant une dynamique collaborative où les stagiaires peuvent partager leurs expériences et apprendre les uns des autres.
• mises en situation concrètes, simulant des scénarios professionnels afin d'évaluer la capacité des stagiaires à réagir et à s'adapter face à diverses situations.

Durant la dernière heure de la formation, un questionnaire d'évaluation ainsi qu'un questionnaire à chaud de fin de formation seront soumis à chaque stagiaire pour s'assurer de la bonne acquisition des compétences tout au long de la formation et de l'adéquation de ces acquis avec les attentes des stagiaires (émis en amont de la formation). Ce processus d'évaluation permet également aux formateurs d'obtenir un retour constructif sur le déroulement du programme et d'identifier les points à améliorer pour les prochaines sessions.

Dans le cas d'une formation officielle éditeur, n'hésitez pas à nous consulter afin que nous vous fassions part des modalités d'évaluation des acquis. Nous sommes également disponibles pour discuter des certifications possibles qui pourraient être délivrées à l'issue de cette formation, garantissant ainsi une reconnaissance officielle des compétences acquises par les participants.

Les ressources pédagogiques proviennent de productions des équipes Zenika, qui mettent à profit leur expertise et leur expérience dans le domaine de la formation professionnelle.

Ces ressources sont soigneusement élaborées pour répondre aux besoins spécifiques des apprenants et garantir une compréhension approfondie des sujets abordés.

Dans le cas d'une formation "Officielle", la documentation utilisée est issue directement des éditeurs, ce qui assure une conformité avec les standards et les meilleures pratiques du secteur.

Les documents sont disponibles en français ou en anglais, permettant ainsi une accessibilité maximale pour un public diversifié.

De plus, ces ressources incluent souvent des études de cas, des exercices pratiques et des supports visuels afin d'enrichir l'expérience d'apprentissage et de favoriser l'engagement des participants.

Besoin d'un coup de pouce pour adapter votre formation ? On s'en charge !

Chaque apprenant est unique. Que vous ayez besoin d'ajuster le rythme, le contenu, ou même les modalités d'apprentissage, nos équipes expertes sont là pour vous écouter et co-construire une solution sur-mesure.

 
Nous nous engageons à offrir à chacun une expérience de formation enrichissante, accessible et parfaitement adaptée à vos besoins. Besoin d'un aménagement spécifique ? Un petit tweak pédagogique ou technique ? Pas de souci, nous sommes prêts à relever ce genre de défis avec vous.

Contactez-nous, et ensemble, nous trouverons la meilleure solution pour répondre à vos attentes.