1. 程式人生 > >下一代高效能資料庫標杆POLARDB 亮相頂會VLDB2017

下一代高效能資料庫標杆POLARDB 亮相頂會VLDB2017

8月28日-9月1日,第四十三屆VLDB會議在德國慕尼黑舉行。阿里巴巴在本屆VLDB展區重點展示了ApsaraDB、AliSQL、AnalyticDB和MaxCompute等資料庫和資料處理技術,特別是基於硬體條件極致優化的下一代資料庫產品POLARDB,引起現場與行業專家學者的注意和交流探討。


image


VLDB,全稱InternationalConference on Very Large Databases,是資料庫領域三大頂級國際會議之一,是由成立於美國的非盈利性機構VLDB基金會贊助和運營。第一屆VLDB於1975年在美國召開,大會以在全球普及資料庫技術研究和交流作為使命。

本屆VLDB共有來自全球的750篇研究論文投稿,其中133被接收,接收率不到18%。整體內容覆蓋traditional database、data analysis、spacial and graph和deap leaning等領域。在現場展示方面,VLDB2017的參展廠商既包括Oracle、SAP、Microsoft等傳統含資料庫業務的廠商,也包括阿里巴巴、Google和Facebook等新興的網際網路科技企業。

阿里巴巴資料庫技術作為阿里IT基礎設施的重要組成部分,和阿里雲資料庫ApsaraDB的技術支撐,在工程實踐和技術創新上一直走在同行前列。從2011起,阿里資料庫技術團隊開始使用MySQL等開源資料庫和OceanBase自研資料庫取代傳統商業資料庫,2016年雙11創下支付峰值12萬筆/秒世界紀錄;經過歷年雙11磨練,基於MySQL深度定製的AliSQL比官方版本效能提升70%,秒殺場景下效能提升近百倍。

業務能力方面,阿里巴巴已將自有資料庫技術和服務通過阿里雲輸出,滿足電商、雲端計算和金融等多種應用場景的客戶需求,目前阿里雲提供近20種資料庫服務,是全球最穩定、最完整的雲資料庫產品陣列。

特別是即將釋出的阿里雲POLARDB,基於最新的儲存和網路硬體裝置特點,大量採用高速網路互聯、儲存塊裝置、分散式檔案系統、資料庫物理複製、資料共享儲存等熱點技術手段,通過放棄傳統分散式資料庫OLTP多路併發寫的支援,採用一寫多讀的架構設計,簡化分散式系統難以兼顧的理論模型,大幅度提升OLTP效能。

阿里自研實時高併發線上分析型資料庫AnalyticDB,支援毫秒級的多個大表關聯計算,全面相容MySQL協議,內建支援多種資料來源資料快速接入,支援高併發準實時資料寫入/刪除,寫入速度可達數百萬TPS,對千億級資料進行即時的多維分析透視和業務探索。

此外,阿里自研的另一款產品——MaxCompute(原名ODPS),技術上支援高達EB級儲存並提供完善的資料匯入方案,支援包括SQL、MapReduce、Graph等計算型別及MPI迭代類演算法在內的多種計算模式,具備萬臺伺服器擴充套件能力和跨地域容災能力,為阿里雲上千萬客戶提供快速、完全託管的PB級數倉解決方案。

在現場3天的交流展示環節中,眾多工業界技術專家和高校學者到訪阿里巴巴技術展臺,就阿里目前在資料庫和大資料方面的技術進展進行交流。來自Facebook的華人工程師陳國強回憶到,他曾在2012年初次來杭州做過交流,到VLDB2014在杭州舉辦,再到今天VLDB2017現場交流,讓他感覺到阿里在大資料技術方面的能力和矽谷的差距正在迅速變小。

同樣來自Facebook的資料庫工程師,MHA(Master High Availability)作者YoshinoriMatsunobu,對現場展示的阿里巴巴下一代資料庫POLARDB展示了極大興趣,尤其就POLARDB在物理複製、事務狀態同步和並行raft上改進等方面的技術細節,和現場參會的阿里雲資料庫資深專家林曉斌做了細緻探討,另外也就共享儲存架構在水平擴充套件和高可用場景的優勢展開交流。


image
Yoshinori Matsunobu和林曉斌在阿里巴巴展臺合影

近年來,阿里巴巴資料庫技術和學界合作也走在了前列,此次參與VLDB2017的資料技術領域知名學者IEEE Fellow、新南威爾士大學林學民教授,已經在圖資料庫領域和阿里巴巴資料庫技術團隊一起展開合作。前微軟研發合夥人周靖人也在去年加入阿里巴巴,周靖人是雲端計算大資料、大規模分散式系統和資料庫等領域的國際級學者,他曾多次在資料和系統領域的國際頂會議上(VLDB、SIGMOD和ODSI等)發表論文,也是此次VLDB2017的工業和應用分論壇的主席之一。在此次展會期間,還有來自德雷斯頓理工的Wolfgang Lehner教授,滑鐵盧大學的Tamer Ozsu教授等國際資料庫學界頂級專家造訪阿里技術展臺並交流探討。


image
周靖人和加拿大滑鐵盧大學Tamer Ozsu教授等人在阿里巴巴展臺合影 

從3月推出的NASA計劃,到7月推