Project Metamorphosis: Wir präsentieren die Event-Streaming-Plattform der nächsten Generation. Mehr erfahren

The Data Dichotomy: Rethinking Data & Services with Streams

Typically when we build service based apps, microservices, SOA and the like, we use REST or some RPC framework. But building such applications becomes tricky as they get larger, more complex and share more data. We can trace this trickiness back to a dichotomy that underlies the way systems interact: Data systems are designed to expose data, to make it freely accessible. But services, instead, focus on encapsulation. Restricting the data each service exposes. These two forces inevitably compete as such systems evolve.

This talk will look at a different approach. One where a distributed log can be used to hold data that is shared between services. Then stateful stream processors are embedded right in each service, providing facilities for joining and reacting to the shared streams. The result is a very different way to architect and build service-based applications, but one with some unique benefits as we scale.

Presenter

Ben Stopford

Ben arbeitet als Technologe im Büro des CTO von Confluent und hat bereits an zahlreichen Projekten mitgewirkt, von der Implementierung der aktuellen Version des Replikationsprotokolls von Kafka bis hin zu Entwicklungsstrategien für Streaming-Anwendungen. Bevor Ben zu Confluent kam, war er bei einem großen Finanzinstitut für die Entwicklung und das Design einer unternehmensweiten Datenplattform verantwortlich und arbeitete an verschiedenen service-orientierten Systemen der ersten Stunde im Finanzsektor und bei Thoughtworks.