現代的網際網路分散式系統，只要稍微大一些，就一定逃不開3類中介軟體：遠端呼叫（RPC）框架、訊息佇列、資料庫訪問中介軟體。Kafka 是訊息佇列中介軟體的代表產品，用 Scala 語言實現，本文采用的是 Kaf

Kafka 副本和叢集 在生產環境中，Kafka 總是以“叢集+分割槽”方式執行的，以保證可靠性和效能。下面是一個3副本的 Kafka 叢集例項。 首先，需要啟動3個 Kafka Broker，Brok

Kafka 的工具和程式設計介面 Kafka 的工具 Kafka 提供的工具還是比較全的，bin/ 目錄下的工具有以下一些， bin/connect-distributed.sh

在kafka的server.log中發現瞭如下報錯資訊： ERROR Closing socket for /xxx.xxx.xxx.xxx because of error (kafka.network.

測試環境使用的Kafka出現了點兒問題，伺服器被停止，所有的topic日誌不知怎的被清空。一番大清洗（清理zookeeper節點、kafka topic log）、重啟Kafka、建立分割槽後發現報瞭如下的錯誤

在kafka的server.log中發現持續爆出如下錯誤資訊： [2018-10-24 19:18:43,103] ERROR Closing socket for /xxx.xxx.xxx.xxx bec

Kafka是一個分散式釋出—訂閱系統，由於其強大的分散式和效能特性，迅速成為資料管道的關鍵部分。它可完成許多工作，例如訊息傳遞、指標收集、流處理和日誌聚合。Kafka的另一個有效用途是將資料匯入Hadoop。使

Kafka 原始碼系列之 Broker 的 IO 服務及業務處理 一， kafka 角色 Kafka 原始碼系列主要是以 kafka 0.8.2.2 原始碼為例。以看 spark 等原始碼的經

1.概述 平時在使用Kafka的時候，可能關注的更多的是Kafka系統層面的。今天來給大家剖析一下Kafka的控制器，瞭解一下Kafka控制器的選舉流程。 2.內容 Kafka控制器，其實就是一個K

本文是David Romero一篇Spring + Kafka Stream實現CQRS的案例程式碼： 去年九月，我的同事伊萬·古鐵雷斯和我談到我們cowokers如何實現事件與Kafka Stream，我

隨著 Apache Pulsar 成為 Apache 的頂級開源專案，其儲存層的解決方案 Apache BookKeeper 再次受到業界廣泛關注。BookKeeper 在 Pulsar 之前也有很多成功的應

浪院長，最近忙死了，寫文章的時間都沒了。但是，都說時間就像海綿裡的水，擠擠就有了。所以，今晚十點半開始整理這篇Structured streaming 相關的文章。 最近，忙於開發完善flink平臺，並且使

一.Kafka中的核心概念 Producer: 特指訊息的生產者 Consumer :特指訊息的消費者 Consumer Group :消費者組，可以並行消費Topic中partition

消費者從屬於消費者群組。一個群組裡的消費者 訂閱的是同一個主題 ， 每個消費者接收主題一部分分割槽的訊息 消費者橫向擴充套件 1個消費者 主題T1有4個分割槽，然後建立消費者C1，C

一.Kafka簡介 Kafka是分散式釋出-訂閱訊息系統。它最初由LinkedIn公司開發，使用Scala語言編寫，之後成為Apache專案的一部分。 Kafka是一個分散式的，可劃分的，多訂閱者，冗餘備