Apache Commons

Spark Streaming + Kafka 的 offset 管理方法

點選上方藍字關注【 北郵郭大寶 】 最近實習需要開發一套Spark Streaming的實時流處理專案,內心還是很期待的。說來慚愧,做大資料開發實習一年有餘了,都是離線批處理的任務,還沒親自操

(4)shiro多個realm

shiro支援多個realm,當設定多個realm的時候,shiro的認證和授權的步驟是怎樣的呢。 多個realm認證原理: 發現需要在執行認證的時候,需要策略來處理多個re

深入Apache Flink核心技術

編輯推薦: 本文來自於csdn,本文主要介紹了Flink專案的一些關鍵特性,希望通過本文的介紹能夠讓讀者對Flink有更多的瞭解,也讓更多的人使用

當 Structured Streaming 碰到 Kafka

本文中,我們來看下用  Structured Streaming 怎麼處理 kafka中的複雜json 資料流,Structured Streaming 強項我們都知道,可以使用 event-time  進行聚

如何使用 Apache Web 伺服器配置多個站點

如何在流行而強大的 Apache Web 伺服器上託管兩個或多個站點。 在我的上一篇文章中,我解釋瞭如何為單個站點配置 Apache Web 伺服器,事實證明這很容易。在這篇文章中,我將向你展示如何使用單

使用Kafka實現事件溯源

EventSourcing事件溯源是儲存這些實體相關的事件流(實則是明細表),而不是直接儲存實體的“當前”狀態。每個事件都是一個事實,它描述了實體發生的狀態變化(過去時態!)。眾所周知,事實是無可爭議的,不可改

使用 Calcite 實現一個簡單的資料庫

Calcite 說到Calcite你可能有些陌生,但提及Hive、Kylin、Apache Drill、Flink等一定不會陌生,這些都是在我們日常工作中經常用到的。如上這些都是基於Calcit

Apache Kylin 入門 5 - 構建 Cube

Cube Info 介面主要填寫 Cube 的一些基本資訊,首先要選擇一個數據模型,然後填寫 Cube 名稱,Cube 名稱全域性唯一不能重複;Cube 資訊填寫完成後點選 “Next” 進入下一步。

1746043929.7508