1. 程式人生 > >阿裏雲HBase全新發布X-Pack 賦能輕量級大數據平臺

阿裏雲HBase全新發布X-Pack 賦能輕量級大數據平臺

系列 足夠 基礎 數據 恢復 aca 延遲 https 大數據時代

一、八年雙十一,造就國內最大最專業HBase技術團隊

阿裏巴巴集團早在2010開始研究並把HBase投入生產環境使用,從最初的淘寶歷史交易記錄,到螞蟻安全風控數據存儲。持續8年的投入,歷經8年雙十一鍛煉。4個PMC,6個committer,造就了國內最大最專業的HBase技術團隊,其中HBase內核中超過200+重要的feature是阿裏貢獻。集團內部超過萬臺的規模,單集群超過千臺,全球領先。

二、HBase技術團隊重磅發布X-Pack,重新賦能輕量級大數據平臺

阿裏雲自從17年8月提供HBase雲服務以來,到18年12月累計服務了上千大B客戶,已經有上千個在線的集群。是阿裏雲增長最為快速的數據庫服務,也是大B客戶比例最高的雲服務之一。並於6月6日全球第一個推出HBase 2.0,是HBase領域當之無愧的排頭兵。

為了滿足客戶對數據庫更豐富業務處理需求、更易用、強大功能的需求,我們重磅發布 X-Pack :支持SQL、時序、時空、圖、全文檢索能力、及復雜分析。阿裏雲HBase從KV為主大數據數據庫成功進化成“輕量級全托管大數據平臺”數據庫。

全部能力計劃12月底全部上線。

三、深度解讀 “ 輕量級全托管大數據平臺 ”,雲HBase能力再上新臺階

通常一個大企業裏面,數據和業務存在天然的多樣性。真正稱得上平臺級的數據庫,要至少要滿足客戶不同三個及以上層次的訴求,才能稱的上平臺級。

阿裏雲HBase從成本最優化、運維便利性、業務敏捷度三個方面將HBase的能力全面提升一個高度,成就輕量級全托管大數據平臺,雲HBase能力再上新臺階。

3.1 輕量級,滿足CXO成本最優化的訴求

1)起步成本低,整體成本低,擴展性強。
雲HBase針對企業不同的使用環境,不同的SLA訴求,雲HBase一共提供3個版本,分別滿足開發環境,在線業務,以及金融級業務的訴求。單節點版本,低廉的價格用於開發測試場景,集群版本,99.9%可用,滿足企業在線業務訴求,支持最高5000萬的QPS和10P的數據。還有支持金融級高可用的雙活版本。所有版本都支持11個9的數據可靠性,無需擔心數據丟失。

2)支持冷存儲,助你不改代碼,1/3成本輕松搞定冷數據處理

大數據場景下,存儲成本占比往往是大頭,把存儲成本降下來,整體成本才能下降。

一般隨著業務的發展,HBase中存儲的數據量會逐漸變大。在這些數據中,業務最關心的,最常訪問的,往往是某些特定範圍的數據,比如說最近7天的數據,業務對這類數據訪問頻次高,延遲要求高,即所謂的熱數據。而其他的數據,一般訪問量極少,性能要求不高, 但這類數據往往數據量大,即冷數據。如果能把冷熱數據分離開,把熱數據存儲在性能更好的介質中,而把龐大的冷數據放到成本更低的介質中,從而實現把更多優質資源用來提高熱數據的讀寫性能,同時節省存儲成本的目的。

技術分享圖片

阿裏雲HBase針對冷數據存儲的場景,提供一種新的冷存儲介質,其存儲成本僅為高效雲盤的1/3,寫入性能與雲盤相當,並能保證數據隨時可讀。冷存儲的使用非常簡單,用戶可以在購買雲HBase實例時選擇冷存儲作為一個附加的存儲空間,並通過建表語句指定將冷數據存放在冷存儲介質上面,從而降低存儲成本,基本不用改代碼就獲得了低成本存儲能力,助力企業降低整體成本。

3.2 全托管,全面解放運維,為業務穩定保駕護航

大數據時代,數據是企業最寶貴的資產,業務是企業賴以生存的基礎。因此高可用和高可靠是最基本訴求。雲HBase提供的全托管服務相比其他的半托管服務以及自建存在天然的優勢。

依托持續8年在內核和管控平臺的研究,以及大量配套的監控工具、跨可用區,跨域容災多活方案,雲HBase提供目前業界最高的4個9的可用性(雙集群),11個9的可靠性的高SLA的支持,滿足眾多企業客戶對平臺高可用、穩定性的訴求。

雲HBase服務定位為全托管服務,後臺自動代維和保持服務穩定性,極大的降低了客戶使用門檻,讓無論是SME,還是巨頭都能享受到HBase技術紅利。選擇雲HBase就是選擇了高可用、高可靠服務!

3.3 全面能力提升,源頭解決業務敏捷度,真正釋放數據和業務的價值

1)100%兼容原生接口和能力,開發簡單,容易上手。
雲HBase百分百兼容開源接口,並提供一系列配套開發,數據搬遷,監控工具,全面幫助用戶提高開發和管理效率。

2)獨家跨Region/AZ雙活
技術分享圖片

阿裏雲是雲HBase首家推出跨Region/AZ雙活,在一個集群出現故障的時候,迅速地將業務切換至另外一個集群從而避免故障。HBase主備之間數據的同步基於異步鏈路實現,遵循最終一致性協議,典型的主備同步延遲在200ms左右。滿足金融、社交、電商、人工智能等關鍵領域對高可用的訴求。

3)備份恢復量級提升百倍以上,數據庫領域最大
我們經常會聽到“某某某DBA誤操作把整張表刪了”,“某某磁盤故障,造成數據庫的某個庫的數據全部損壞了”。這種由於外在和內在的原因造成的數據不可靠,最終會給用戶帶來毀滅性的災難。

所以一個企業級數據庫,全量備份、全量恢復、增量備份、增量恢復,是基礎能力。傳統數據庫備份恢復的能力都是TB級別,這在交易等場景下面是足夠的,但是面向大數據場景就捉襟見肘了。雲HBase通過垂直整合高壓縮、內核級優化,分布式處理等能力,將備份恢復的量級成功推高百倍以上,做到百TB級別甚至更高,讓客戶大數據量下面也無後顧之憂。

4)支持融合多模型和融合多負載、提供開箱即用的能力

雲HBase在KV的基礎上,同時支持時序、時空、圖、文檔等多種數據模型,內置豐富處理能力,讓業務開發效率提升百倍。

在線能力的基礎上,融合流處理、批處理、OLAP,OLTP、高速對象存儲,全文檢索等能力,提供客戶融合業務開箱即用的能力。

四、展望未來,持續優化服務,不負重托,成就客戶

歷經近8年的技術沈澱,阿裏巴巴大數據NoSQL數據庫處理技術的精華沈澱在HBase上,後者成功支撐了成功支撐了阿裏經濟體中最大的NoSQL業務體量,是阿裏大數據處理技術的核心組成部分,當前將這項技術應用到廣大企業中,助力企業發現數據價值。

短短1年間,就覆蓋了社交、金融、政企、車聯網、交通、物流、零售、電商等數十個個行業,幫單用戶頂住千萬級QPS的業務壓力,以及百PB級數據高效存儲和處理。

展望未來,雲HBase團隊定不負客戶重托,持續圍繞客戶業務,成本,運維各個方面優化服務,成就客戶!


原文鏈接
本文為雲棲社區原創內容,未經允許不得轉載。

阿裏雲HBase全新發布X-Pack 賦能輕量級大數據平臺