#104 | Welkom Confluent - Real‑time data op schaal

Vandaag aan tafel:

Barend Baarssen

Tonny Bastiaans

Karel van der Woude

Rishi Doerga

Timeline:

00:00 – Intro

00:30 – Introductie van Rishi Durga en de overname door IBM

02:09 – Wat is Kafka?

07:40 – De technische werking

13:04 – De toegevoegde waarde van Confluent

15:03 – Mainframe offloading en latency

20:03 – Data filteren en combineren

22:05 – Confluent en AI

24:25 – Security en RBAC

Shownotes:

In deze aflevering schuift Rishi Doerga aan, Solution Engineer bij Confluent, om de recente overname door IBM en de essentie van data streaming te bespreken. De kern van het gesprek draait om Apache Kafka en hoe Confluent deze open-source technologie transformeert naar een robuust, enterprise-ready platform. Centraal staat het concept van 'events', waarbij data niet als statische eindstaat in een database wordt gezien, maar als een continue stroom van gebeurtenissen.

Het platform biedt een oplossing voor de beperkingen van traditionele systemen, zoals mainframes, door data direct te 'offloaden' naar een schaalbare integratielaag. Met meer dan 300 connectoren stelt Confluent bedrijven in staat om binnen enkele minuten diverse databronnen te ontsluiten en te koppelen. Door gebruik te maken van stream-processing via Flink kan deze data bovendien direct gefilterd, geaggregeerd en geanalyseerd worden met een latency van milliseconden.

Tot slot wordt de cruciale rol van data streaming binnen moderne AI-architecturen besproken, specifiek voor het aansturen van autonome agents. Door Kafka als asynchrone communicatielaag te gebruiken, blijven AI-ketens robuust en schaalbaar, zelfs als individuele onderdelen vertragen. Confluent voegt hier een essentiële governance-laag aan toe met Role Based Access Control en automatische encryptie, waardoor ontwikkelaars zich volledig kunnen richten op innovatie in plaats van complexe security-vraagstukken

Links:

Confluent: https://www.confluent.io

LinkedIn Rishi Doerga: https://www.linkedin.com/in/rishi-doerga-393901/

Overname in het nieuws: https://www.dutchitchannel.nl/news/727461/ibm-voltooit-miljardenovername-van-confluent

Op- en aanmerkingen kunnen gestuurd worden naar: ofjestoptdestekkererin@nl.ibm.com