1. 程式人生 > >2年Java工程師轉行大資料的開始

2年Java工程師轉行大資料的開始

       因為上一份工作涉及到了大資料,讓我對這個行業有了個初步的瞭解,再加上工作一年多,原公司不給漲薪,所以果斷辭職,出去旅遊了一段時間,剛回家準備脫產學習大資料,我會用部落格來記錄我的學習歷程。

檔案儲存:Hadoop HDFS

離線計算:Hadoop MapReduce、Spark

流式、實時計算:Storm、Spark Streaming

K-V、NOSQL資料庫:HBase、Redis

資源管理:YARN

訊息系統:Kafka

查詢分析:Hive、SparkSQL

分散式協調服務:Zookeeper

圖形介面:Hue

資料同步:Sqoop

任務排程:Oozie

日誌籌集:Flume