))
Kafka: A Distributed Messaging System for Log Processing
Manage episode 487366633 series 3670304
Inhalt bereitgestellt von The Binary Breakdown. Alle Podcast-Inhalte, einschließlich Episoden, Grafiken und Podcast-Beschreibungen, werden direkt von The Binary Breakdown oder seinem Podcast-Plattformpartner hochgeladen und bereitgestellt. Wenn Sie glauben, dass jemand Ihr urheberrechtlich geschütztes Werk ohne Ihre Erlaubnis nutzt, können Sie dem hier beschriebenen Verfahren folgen https://de.player.fm/legal.
This paper introduces Kafka, a novel distributed messaging system designed for high-throughput log processing. Kafka addresses limitations in existing messaging systems and log aggregators by offering a scalable, efficient architecture with a simple API. Key features include a pull-based consumption model, efficient storage and data transfer mechanisms, and the use of ZooKeeper for distributed coordination. Performance tests demonstrate Kafka's superior throughput compared to ActiveMQ and RabbitMQ, highlighting its suitability for handling massive volumes of log data. The authors detail Kafka's implementation at LinkedIn, illustrating its use in both online and offline applications.
https://notes.stephenholiday.com/Kafka.pdf
44 Episoden
Teilen
