Fayson的github： https://github.com/fayson/cdhproject

推薦關注微信公眾號：“Hadoop實操”，ID：gh_c4c535955d0f，或者掃描文末二維碼。

作者：Alex Robbio，Belatrix Software的總裁兼聯合創始人，去年在阿根廷獲得了年度EY企業家獎

幾個星期以前，Hadoop時代的兩大巨頭Cloudera和Hortonworks宣佈他們將合併。該公告聲稱這將是“merger of equals(平等的合併)”。看到這兩個開創性的先驅能走到一起是非常有趣的。

我記得幾年前這兩家公司進入技術市場時，他們承諾幫助企業負責人重新構建他們的資料中心和IT架構 - 並大大降低儲存和處理資料的成本，從過去常見的每TB數千美元。他們認識到各種資料來源包括物聯網裝置，視訊，交易日誌，社交網路日誌等產生的資料非常龐大，傳統的資料基礎設施根本不適合這些任務。他們使企業能夠完成以前無法完成的專案。他們是解決“IT問題”轉變為解決“業務問題”的核心，業務負責人很快就瞭解這些新技術的潛力，即通過資料為客戶提供新服務。他們也是企業的核心，讓企業可以根據資料做出決策，而不是根據高管的直覺。這是因為它們使企業可以分析他們收集的所有資料並使用它來做出決策。

現在這兩家公司面臨來自亞馬遜和微軟等公司的巨大競爭。現在的企業對於大資料的處理和分析有很多選擇，尤其是在公有云上。我們還看到企業希望轉向無伺服器架構，其中應用程式可以使用第三方提供的後端即服務（backend-as-a-service）和功能即服務功能（function-as-a-service）。這裡還有一個額外的好處：企業只需為他們使用的計算能力和儲存付費。

所以，它不再僅僅是Hadoop。Cloudera的CEO Tom Reilly在合併後的評論中承認：“Hadoop發展得如此迅速，以至於我們甚至都不再提及它了。”另一篇文章也說明了企業在進行選擇時已經不僅僅只有Hadoop，而且你不得不思考，如果這種趨勢持續下去，技術的未來將是什麼。正如這篇文章的作者所寫，“重心已轉移到其他地方。”

這一發展代表的是大資料現在變成了僅僅只是資料。無論大中小企業現在都可以獲得比以往任何時候都多的資料，包括批量或者實時等。他們有更多的技術選擇來使用這些資料構建服務 - 不同的場景使用不同型別的資料需要選擇合適的技術來實現。例如，現在有更多的開源工具的選擇，或者專有的機器學習平臺。其中許多使得具有10年曆史的Hadoop技術看起來過時了。

在大資料的第一次迭代中，大多數大型企業在研究的解決問題的技術一般是比如預測貸款違約或客戶流失，而今天，企業的目標是為客戶提供新的，更加個性化的服務。實時資料意味著您可以提供互動式服務和應用程式，這些服務和應用程式不僅會產生新的業務價值，更重要的是會產生客戶價值。今天，當我與客戶交談時，無論是領先的零售商還是金融服務機構或其他行業，談話都很少涉及大資料。相反，高管們專注於如何在由人工智慧和機器學習主導的世界中為使用者和客戶提供強大的數字體驗。使用資料，機器學習演算法使企業能夠提供新的服務，例如超個性化的零售體驗，或者讓銀行預測何時有人可能對抵押貸款感興趣。CB Insights進行的一項有趣的

儘管如此，Hadoop仍然是許多企業的核心技術。Cloudera和Hortonworks將共同為客戶提供更全面的服務和產品，例如端到端雲大資料產品和對更復雜部署的支援。然而，技術世界繼續快速發展，許多企業已經開始超越Hadoop技術。在接下來的幾年，這將是一個有趣並值得關注的方向。

原文參考：

https://www.forbes.com/sites/forbestechcouncil/2018/11/16/are-we-nearing-the-end-of-hadoop-and-big-data/#32a862c4e047

為天地立心，為生民立命，為往聖繼絕學，為萬世開太平。

推薦關注Hadoop實操，第一時間，分享更多Hadoop乾貨，歡迎轉發和分享。

原創文章，歡迎轉載，轉載請註明：轉載自微信公眾號Hadoop實操