Apache Kafka

kafka叢集內複製功能深入剖析

kafka是一個分散式釋出訂閱訊息系統。由LinkedIn開發並已經在2011年7月成為apache頂級專案。kafka在LinkedIn, Twitte等許多公司都得到廣泛使用,主要用於:日誌聚合,訊息佇列,

Kafka落選!InfoWorld最佳開源資料平臺獎公佈

AI前線導讀:一年一度由世界知名科技媒體InfoWorld評選的Bossie Awards於9月26日公佈,本次Bossie Awards評選出了最佳資料庫與資料分析平臺獎、最佳軟體開發工具獎、最佳機器學習專案

四、Kafka 核心原始碼剖析

一、Kafka消費者原始碼介紹 1.分割槽消費模式原始碼介紹 分割槽消費模式直接由客戶端(任何高階語言編寫)使用Kafka提供的協議向伺服器傳送RPC請求獲取資料,伺服器接受到客戶端的RPC請

Kafka Controller Redesign方案

Kafka Controller 是 Kafka 的核心元件,在前面的文章中,已經詳細講述過 Controller 部分的內容。在過去的幾年根據大家在生產環境中應用的反饋,Controller 也積累了一些比

log4j2傳送訊息至Kafka

title: 自定義log4j2傳送日誌到Kafka tags: log4j2,kafka 為了給公司的大資料平臺提供各專案組的日誌,而又使各專案組在改動上無感知。做了一番調研後才發現log4

storm-kafka 入門

在資料密集型的系統架構中,一般會使用Kafka作為中間的緩衝,使用Storm做資料統計時,我們一般會從Kafka中消費訊息,然後把最終的統計結果儲存到Redis中,storm-kafka模組極大方便了

訊息中介軟體客戶端消費控制實踐

本文來自網易雲社群,轉載務必請註明出處。 背景 訊息中介軟體是用來系統間通訊、非同步解耦、削峰填谷的重要手段,個人認為一個比較靠譜的Mq,應該具備以下特點 控制投遞:訊息消費失敗,支

瞭解 Kafka

經常聽後端童鞋提到Kafka 這個詞,加上業務慢慢有了交集,對Kafka 的好奇越來越強烈。索性花點時間,一探究竟,順便擴充套件一下技能樹。 一、Kafka 是什麼?

1746001225.4606