1. 程式人生 > >0基礎學習hadoop怎麼學?怎麼進行hadoop入門學習

0基礎學習hadoop怎麼學?怎麼進行hadoop入門學習

學hadoop需要什麼基礎?Hadoop作為大資料工業中的主引擎,Hadoop就像是大資料世的一把鑰匙,想要進入資料世界,首先你得顯得得到這把鑰匙,才能開啟大門。

學hadoop需要什麼基礎?Hadoop是一個分散式計算架構,更重要的是它是一個可擴充套件的生態系統,像IBM,EMC,Amazon,微軟,甲骨文等大型IT公司都已經有了基於Hadoop的商業化大資料產品。雖然現在還有比Hadoop更為先進的分散式架構(Dremel,DataFlow等),但也都是基於Hadoop的改進升級,因此也說Hadoop是大資料的基礎,基礎的穩固決定了未來能走多遠!!

當下社會,大資料依然是火的不要不要的,作為大資料基礎的Hadoop自然也會備受重視,那麼Hadoop的使用場景有哪些?小編給大家介紹下。

1,大資料量儲存:分散式儲存

2,日誌處理:Hadoop擅長這個

3,海量計算:平行計算

4,ETL:資料抽取到Oracle、MySQL、DB2、mongdb及主流資料庫

5,使用Hbase做資料分析:用擴充套件性應對大量的寫操作—Facebook構建了基於HBase的實時資料分析系統

6,機器學習:比如Apache Mahout專案

7,搜尋引擎:hadoop + lucene實現

8,資料探勘:目前比較流行的廣告推薦,9,使用者細分特徵建模

10,個性化廣告推薦,

11,智慧儀器推薦

捎帶,小編向大家介紹Hadoop學習方面的一些事項。希望對新手學習Hadoop有所幫助。

學習hadoop學什麼?

主要學習hadoop的核心元件:hdfs、mapreduce、yarn。它們是hadoop最最核心的部分。在它們的基礎上,我們還可以選擇性的學習hadoop生態圈中的日誌收集工具flume、資料倉庫Hive、分散式資料庫hbase、資料匯入匯出工具sqoop。

學習hadoop需要什麼基礎?

hadoop需要具備javaSE的基礎知識,對於javaEE(jsp/servlet/三大框架)沒有要求。需要熟練使用Linux系統。大體上,有這些預備知識就夠了。也有人說,只需要具備javaSE知識就足夠了。

學完hadoop會影響javaEE工作嗎?

嚴格的講,hadoop與javaEE是兩個不同的發展思路,hadoop傾向於底層資料處理部分,javaEE負責系統開發,二者前後相繼,沒有交叉,相輔相成。大資料Hadoop學習群142973723

學習hadoop對演算法和資料結構要求高嗎?

一般海量資料的處理都是自定義儲存結構,實現自己的演算法,這是業界的通用處理思路。這對普通程式設計師而言要求還是很高的。hadoop的優點就是進行了封裝,寫的演算法都是偏向於業務的,不需要創造演算法。因此大可放心。但是,如果工作的公司不使用hadoop去處理大資料,這時候對演算法和資料結構的要求就高了。