錄製於 SpringOne2GX 2015。 講者：Joe Stein 大數據主題 Slides: http://www.slideshare.net/SpringCentral/developing-realtime-data-pipelines-with-apache-kafka-53201942 使用 Apache Kafka 開發即時資料管線 http://kafka.apache.org/ 是一個為開發人員介紹為何及如何使用 Apache Kafka 的簡介。 Apache Kafka 是一個重新思考為分散式提交日誌的發布-訂閱訊息系統。 Kafka 的設計目的是允許單個叢集充當中央資料骨幹。 單個 Kafka broker 可以處理來自數千個客戶端的每秒數百 MB 的讀寫。 它可以彈性且透明地擴展，而不會停機。 資料流經過分割並分佈在機器叢集上，以允許資料流大於任何單個機器的容量，並允許協調的消費者叢集。 消息會持久儲存在磁碟上，並在叢集中複製以防止資料遺失。 每個 broker 可以處理 TB 級別的消息。 對於 Spring 使用者，Spring Integration Kafka 和 Spring XD 提供與 Apache Kafka 的整合。