1. 程式人生 > >阿里雲HBase全新發布X-Pack 賦能輕量級大資料平臺

阿里雲HBase全新發布X-Pack 賦能輕量級大資料平臺

一、八年雙十一,造就國內最大最專業HBase技術團隊

阿里巴巴集團早在2010開始研究並把HBase投入生產環境使用,從最初的淘寶曆史交易記錄,到螞蟻安全風控資料儲存。持續8年的投入,歷經8年雙十一鍛鍊。4個PMC,6個committer,造就了國內最大最專業的HBase技術團隊,其中HBase核心中超過200+重要的feature是阿里貢獻。集團內部超過萬臺的規模,單叢集超過千臺,全球領先。

二、HBase技術團隊重磅釋出X-Pack,重新賦能輕量級大資料平臺

阿里雲自從17年8月提供HBase雲服務以來,到18年12月累計服務了上千大B客戶,已經有上千個線上的叢集。是阿里雲增長最為快速的資料庫服務,也是大B客戶比例最高的雲服務之一。並於6月6日全球第一個推出HBase 2.0,是HBase領域當之無愧的排頭兵。

為了滿足客戶對資料庫更豐富業務處理需求、更易用、強大功能的需求,我們重磅釋出 X-Pack :支援SQL、時序、時空、圖、全文檢索能力、及複雜分析。阿里雲HBase從KV為主大資料資料庫成功進化成“輕量級全託管大資料平臺”資料庫。

全部能力計劃12月底全部上線。

三、深度解讀 “ 輕量級全託管大資料平臺 ”,雲HBase能力再上新臺階

通常一個大企業裡面,資料和業務存在天然的多樣性。真正稱得上平臺級的資料庫,要至少要滿足客戶不同三個及以上層次的訴求,才能稱的上平臺級。

阿里雲HBase從成本最優化、運維便利性、業務敏捷度三個方面將HBase的能力全面提升一個高度,成就輕量級全託管大資料平臺,雲HBase能力再上新臺階。

3.1 輕量級,滿足CXO成本最優化的訴求

1)起步成本低,整體成本低,擴充套件性強。
雲HBase針對企業不同的使用環境,不同的SLA訴求,雲HBase一共提供3個版本,分別滿足開發環境,線上業務,以及金融級業務的訴求。單節點版本,低廉的價格用於開發測試場景,叢集版本,99.9%可用,滿足企業線上業務訴求,支援最高5000萬的QPS和10P的資料。還有支援金融級高可用的雙活版本。所有版本都支援11個9的資料可靠性,無需擔心資料丟失。

2)支援冷儲存,助你不改程式碼,1/3成本輕鬆搞定冷資料處理

大資料場景下,儲存成本佔比往往是大頭,把儲存成本降下來,整體成本才能下降。

一般隨著業務的發展,HBase中儲存的資料量會逐漸變大。在這些資料中,業務最關心的,最常訪問的,往往是某些特定範圍的資料,比如說最近7天的資料,業務對這類資料訪問頻次高,延遲要求高,即所謂的熱資料。而其他的資料,一般訪問量極少,效能要求不高, 但這類資料往往資料量大,即冷資料。如果能把冷熱資料分離開,把熱資料儲存在效能更好的介質中,而把龐大的冷資料放到成本更低的介質中,從而實現把更多優質資源用來提高熱資料的讀寫效能,同時節省儲存成本的目的。

阿里雲HBase針對冷資料儲存的場景,提供一種新的冷儲存介質,其儲存成本僅為高效雲盤的1/3,寫入效能與雲盤相當,並能保證資料隨時可讀。冷儲存的使用非常簡單,使用者可以在購買雲HBase例項時選擇冷儲存作為一個附加的儲存空間,並通過建表語句指定將冷資料存放在冷儲存介質上面,從而降低儲存成本,基本不用改程式碼就獲得了低成本儲存能力,助力企業降低整體成本。

3.2 全託管,全面解放運維,為業務穩定保駕護航

大資料時代,資料是企業最寶貴的資產,業務是企業賴以生存的基礎。因此高可用和高可靠是最基本訴求。雲HBase提供的全託管服務相比其他的半托管服務以及自建存在天然的優勢。

依託持續8年在核心和管控平臺的研究,以及大量配套的監控工具、跨可用區,跨域容災多活方案,雲HBase提供目前業界最高的4個9的可用性(雙叢集),11個9的可靠性的高SLA的支援,滿足眾多企業客戶對平臺高可用、穩定性的訴求。

雲HBase服務定位為全託管服務,後臺自動代維和保持服務穩定性,極大的降低了客戶使用門檻,讓無論是SME,還是巨頭都能享受到HBase技術紅利。選擇雲HBase就是選擇了高可用、高可靠服務!

3.3 全面能力提升,源頭解決業務敏捷度,真正釋放資料和業務的價值

1)100%相容原生介面和能力,開發簡單,容易上手。
雲HBase百分百相容開源介面,並提供一系列配套開發,資料搬遷,監控工具,全面幫助使用者提高開發和管理效率。

2)獨家跨Region/AZ雙活

阿里雲是雲HBase首家推出跨Region/AZ雙活,在一個叢集出現故障的時候,迅速地將業務切換至另外一個叢集從而避免故障。HBase主備之間資料的同步基於非同步鏈路實現,遵循最終一致性協議,典型的主備同步延遲在200ms左右。滿足金融、社交、電商、人工智慧等關鍵領域對高可用的訴求。

3)備份恢復量級提升百倍以上,資料庫領域最大
我們經常會聽到“某某某DBA誤操作把整張表刪了”,“某某磁碟故障,造成資料庫的某個庫的資料全部損壞了”。這種由於外在和內在的原因造成的資料不可靠,最終會給使用者帶來毀滅性的災難。

所以一個企業級資料庫,全量備份、全量恢復、增量備份、增量恢復,是基礎能力。傳統資料庫備份恢復的能力都是TB級別,這在交易等場景下面是足夠的,但是面向大資料場景就捉襟見肘了。雲HBase通過垂直整合高壓縮、核心級優化,分散式處理等能力,將備份恢復的量級成功推高百倍以上,做到百TB級別甚至更高,讓客戶大資料量下面也無後顧之憂。

4)支援融合多模型和融合多負載、提供開箱即用的能力

雲HBase在KV的基礎上,同時支援時序、時空、圖、文件等多種資料模型,內建豐富處理能力,讓業務開發效率提升百倍。

線上能力的基礎上,融合流處理、批處理、OLAP,OLTP、高速物件儲存,全文檢索等能力,提供客戶融合業務開箱即用的能力。

四、展望未來,持續優化服務,不負重託,成就客戶

歷經近8年的技術沉澱,阿里巴巴大資料NoSQL資料庫處理技術的精華沉澱在HBase上,後者成功支撐了成功支撐了阿里經濟體中最大的NoSQL業務體量,是阿里大資料處理技術的核心組成部分,當前將這項技術應用到廣大企業中,助力企業發現數據價值。

短短1年間,就覆蓋了社交、金融、政企、車聯網、交通、物流、零售、電商等數十個個行業,幫單使用者頂住千萬級QPS的業務壓力,以及百PB級資料高效儲存和處理。

展望未來,雲HBase團隊定不負客戶重託,持續圍繞客戶業務,成本,運維各個方面優化服務,成就客戶!

X-Pack將會在12月13日第8屆中國雲端計算標準和應用大會隆重發布,敬請期待!

原文連結