知乎實時數倉實踐及架構演進
“資料智慧” (Data Intelligence) 有一個必須且基礎的環節,就是資料倉庫的建設,同時,資料倉庫也是公司資料發展到一定規模後必然會提供的一種基礎服務。從智慧商業的角度來講,資料的結果代表
“資料智慧” (Data Intelligence) 有一個必須且基礎的環節,就是資料倉庫的建設,同時,資料倉庫也是公司資料發展到一定規模後必然會提供的一種基礎服務。從智慧商業的角度來講,資料的結果代表
Avro 是一種遠端過程呼叫和資料序列化框架,是在Apache的Hadoop專案之內開發的。它使用JSON來定義資料型別和通訊協議,使用壓縮二進位制格式來序列化資料。它主要用於Hadoop,它可以為持
序 本文主要研究一下flink的ParameterTool 例項 fromPropertiesFile String propertiesFilePath = "/home/sam/fl
func main(){ router := gin.Default()//建立一個router router.Use(MiddleWare())//中介軟體,起攔截器的作用 router.A
問題 SQL Server資料倉庫具有自己的特徵和行為屬性,有別去其他。從這個意義上說,資料倉庫基礎架構規劃需要與標準SQL Server OLTP資料庫系統的規劃不同。在本文中,我們將介紹在計劃資料倉庫時
在上一篇中,我們初步的講述了socket的定義,以及socket中的TCP的簡單用法。 這篇我們主要講的是HTTP相關的東西。 什麼是HTTP HTTP-> Hyper Text Trans
聊聊flink的Parallel Execution 序 本文主要研究一下flink的Parallel Execution 例項 Operator Level final StreamExe
對於一個複雜的分散式系統,如果沒有豐富的經驗和牛逼的架構能力,很難把系統做得簡單易維護,我們都知道,一個軟體的生命週期中,後期維護佔了70%,所以系統的可維護性是極其重要的, kafka 能成為大資料領域的事實
在作完預備的初始化和session測試後,到了作為一個權鑑別框架的核心功能部分,確認你是誰--身份認證(Authentication)。 通過提交給shiro身份資訊來驗證是否與儲存的安全資訊資料是否相符來
1 下載 JCraft JCraft 實現了 SSH2。 SSH 即 Secure SHell,它有兩個版本: SSH1 又分為 1.3 和 1.5 兩個版本 。SSH
我們開發的一個基於大資料平臺的資料倉庫,選擇了Flink作為資料處理的底層框架。我們主要看重於它在流處理的低延遲性,訊息傳遞保證的extractly once特性;它為流處理和批處理提供了相對統一的API
Apache Ambari是一個基於Web的支援Apache Hadoop叢集的供應、管理和監控的開源工具,Ambari已支援大多數Hadoop元件,包括HDFS、MapReduce、Hive、Pig、 Hba
序 本文主要研究一下flink的RestartStrategies RestartStrategies flink-core-1.7.1-sources.jar!/org/apache/flink/
基於HTTP協議的網路服務 HTTP協議是基於TCP/IP協議棧的,並且是一個面向普通文字的協議。原則上,使用任何一個文字編輯器,都可以寫出一個完整的HTTP請求報文。只要搞清楚了請求報文的頭部(h
谷歌瀏覽器在去年的十週年版裡開始隱藏網址WWW字首,不過這個做法引起爭議之後谷歌又迅速對其恢復。但是當時谷歌已經提前預告後續版本依然還會繼續進行隱藏,藍點網在谷歌瀏覽器測試版中發現果然又隱藏了。當然