前言 Flink 是一種流式計算框架，為什麼我會接觸到 Flink 呢？因為我目前在負責的是監控平臺的告警部分，負責採集到的監控資料會直接往 kafka 裡塞，然後告警這邊需要從 kafka topic 裡

環境準備 Kafka 版本：kafka_2.10-0.10.2.0（2.10表示Scala版本 0.10.2.0表示Kafka版本） 官方下載地址：

流（Stream）是Redis從5.0.0版本新加入的一個數據結構，是一個類似於Kafka的訊息系統。該結構相關的大部分命令使用字母X 開頭 如XADD ,XLEN ,XRAN

Egg.js ： 基於KOA2的企業級框架 Kafka：高吞吐量的分散式釋出訂閱訊息系統 本文章將整合egg + kafka + mysql 的日誌系統例子 系統要求：日誌記錄，通過kafka進行訊

序 在大資料系統中Kafka應用廣泛，藉助原始碼閱讀可以加深對元件的理解，同時可以拾起Scala語言。 安裝依賴軟體 JDK Scala Gradle Zookee

Maxwell 是一個讀取 MySQL binlogs 並將修改行欄位的更新寫入 Kafka, Kinesis, RabbitMQ, Google Cloud Pub/Sub 或 Redis (Pub/Sub

一， Kafka 消費模式 從 kafka 消費訊息， kafka 客戶端提供兩種模式 : 分割槽消費，分組消費。 分割槽消費對應的就是我們的 DirectKafkaInputDStream

點選上方藍字關注【 北郵郭大寶 】 最近實習需要開發一套Spark Streaming的實時流處理專案，內心還是很期待的。說來慚愧，做大資料開發實習一年有餘了，都是離線批處理的任務，還沒親自操

第1步：生成我們的專案：Spring Initializr 來生成我們的專案。我們的專案將提供Spring MVC / Web支援和Apache Kafka支援。 第2步：釋出/讀取Kafka

Kafka 訊息的 Producer 在呼叫producer.send() 方法傳送訊息時會先把訊息放到本地緩衝中，然後由  Kafka 網路執行緒從緩衝中提取訊息再送到 Kafka 代理上去。本地緩

本文中，我們來看下用  Structured Streaming 怎麼處理 kafka中的複雜json 資料流，Structured Streaming 強項我們都知道，可以使用 event-time  進行聚

EventSourcing事件溯源是儲存這些實體相關的事件流（實則是明細表），而不是直接儲存實體的“當前”狀態。每個事件都是一個事實，它描述了實體發生的狀態變化（過去時態！）。眾所周知，事實是無可爭議的，不可改

Spring for Apache Kafka 2.2釋出了 ，雖然 2.1.x 版本與 2.0.0 kafka-clients jar 相相容（自 2.1.9 起），但此版本要求 2.0.0（並提供

在開發軟體或監控執行的系統時，遙測和環境監測都很重要。在理解了歷史情境下什麼是正常行為之後，通常兩個最緊迫的問題是：（1）什麼發生了變化？（2）什麼表現出異常？ 本文將介紹三個用於臨時監控的流行工具，以及一

一、引言 最近在工作中負責制定重構計劃，需要將部分業務程式碼從 Python 遷移到 Golang。其中一些功能涉及到 Celery 延時任務，所以一直在思考 Golang 中處理延時任務的有效方案。