1. 程式人生 > >嘿!基於雙11的脈衝計算核心能力現已上線!

嘿!基於雙11的脈衝計算核心能力現已上線!

在2018廣東雲棲大會上,阿里雲產品總監何雲飛發表了《雙11,技術推動新商業》的演講。

數字化時代,雙11是極致的商業效率和運營效率的綜合體現,現在每個企業都可以擁有這樣的能力。

a0ef631db5bb1800523e86799b1d043c31643f97

網際網路時代,脈衝計算已經成為了常態,分鐘級的時間內交付幾千臺雲伺服器已經成為基礎。但是峰值結束後,如何避免計算資源的浪費?所以精確到按秒計費非常有必要,讓每一臺雲伺服器都不被浪費,而這樣的彈性,最極致的就是雙11了。

411d627af9788b15f0ccbf55c49bde7880acf937

2018天貓雙11期間,阿里雲累計呼叫了超過1000萬核的彈性計算能力,相當於10座大型的資料中心。

5acb22d0abb4c5266672552dd79207cd53c53cbe

雙11還被稱為全球狂歡節,阿里雲能夠為所有渴望全球能力的數字化企業提供服務,阿里雲在全球19個地域開放了52個可用區,為全球數十億使用者提供可靠的計算支援。不久前,英國倫敦開服,提供了從基礎的彈性計算到大資料計算的全棧能力。

37b542328070660a28880a86cf19623b339eeaf1

雙11已經變成了全社會的雙11,而阿里雲就是整個社會雙11背後的基礎設施,飛天2.0可以把雙11的能力普惠給所有企業,解決企業數字化轉型的問題。

f03c31716245de390e20e7324edd01758f42f004

雙11的能力:連線能力,展示能力,核心交易的能力,資料的分析能力,以及智慧化的能力。

c7fff6ae261c3f47ebf8457fbc14ffc6b8b385d0

在數字化轉型中,企業面臨的第一個問題就是如何連線使用者。

阿里雲則幫助企業和使用者觸達的概率達到99.9%,通過移動推送,全球簡訊,視訊雲等服務,幫助企業實現多通道的使用者觸達。

987b03b17b18f760f2e4653a00be58c0d276e1ef

在展示與互動能力上,他認為視訊直播在未來會應用更為廣泛,過去的直播採用CDN分發,所有的視訊、互動都要到資料中心處理,而這次雙11通過ENS邊緣計算節點服務,互動內容在最近的節點處理,可以為使用者提供更流暢的體驗,

國內卡頓率降低40%,海外卡頓率降低60%以上

4a3aaaf4ea66eb49978812d18c3dba5ae61006e2

如今,容器能夠幫助企業快速的獲得強大的計算能力,而無需關注硬體設施,在雙11中,容器是整個核心交易系統的主角,而在更大的場景中,服務型的客戶在雙11中接到的海量訂單需要快速的被計算(例如生命科學類客戶)這樣就需要阿里雲利用容器+彈性伸縮+資源編排組合提供的超級彈效能力。利用這些工具,企業可以分鐘級啟動全球資源調動,小時級就可以完成TB級的資料計算。

87a4e3160bf2e5ed42fa34e351d4a6033eeb9065

在雙11的核心交易系統中,零點是一個極端高IOPS負載場景,ESSD是最好的解決方案。ESSD基於全新的盤古2.0儲存引擎,創新的使用了阿里自研的底層儲存晶片,同時全面使用了RDMA技術,並在軟體方面進行了升級,讓ESSD能夠做到單盤100萬的IOPS,應對千萬級的峰值毫無壓力。

e6e0bf744f2830272c2f8e2d5d4c18cc899ae2f2

而雙11還有海量的圖片、視訊,這些檔案要被展現、分發、轉碼。基於OSS的極速能力,這些計算可以在OSS的資料湖中完成,通過與FPGA異構計算服務的打通,可以提高50%的效率,同時也極大的降低了計算成本。

3a550badc939fa5c713660709d4d1d7384f44761

資料化的能力也幫助著雙11更穩定,更精確的洞察消費者,雙11的活動中,會產生海量的日誌資料,包括伺服器運維、個性化推薦等等,SLS日誌服務就在解決這些基礎資料的問題,可以提供最高達到100GB/s的寫入速度,在秒級延時內,提供實時業務的洞察分析,並與整個阿里雲的大資料儲存,計算打通,快速獲得分析結果。

194677f536145b4f1ac5a89c6ba9fe40d0b6d86f

在現場,何雲飛還發布了SQL Server 2017企業叢集版,利用AlwaysOn技術實現高可用和讀寫分離,國內首家支援7個讀副本,為客戶的海量峰值資料存取提供了最佳的解決方案。在雙11期間,三隻松鼠基於該產品順利支撐了原來50倍業務壓力的增長。

ca962659e9b5660068f1b6bb24ac9cb18dd6eab9

而在貓晚直播中,最大的挑戰之一就是2.4億全球觀眾的彈幕執行。

雲資料庫Redis首次支援全球多活,就近寫入,跨洲際時延僅為秒級,保障了全球使用者的同步體驗。80%的中國Redis視訊網站客戶正在使用阿里云云資料庫Redis。

e8d2e81c99696b02533d17754286ec69feb48f8d

為了從海量的訂單,工單中瞭解潛在的風險,HybridDB for PostgreSQL在雙11中分析了無數相關事件。作為一個高效能的並完全相容Greenplum分析型資料庫,可以實現最高1000萬行/秒資料的寫入,保障資料能夠實時的流入到數倉中;並可實現幾乎無限的橫向擴充套件,呼叫數千核CPU,幫助客戶服務系統呼叫的SQL,在秒級內輸出結果。

abeb7ce98ffb90598cd8a9ee23575c306e442c12

很多企業目前還會選擇混合雲作為企業的雲形態,RAM2.0在企業的混合雲管理上,再次做了升級,支援SSO單點登入功能。基於SAML 2.0的身份聯盟標準可實現身份互通,並支援AD賬號登陸,企業擁有自己的本地域賬號身份管理系統,就可以從企業本地賬號系統登入到阿里雲。

7625c74453f93227fd8680a1db1ca8e3cece0853

Web應用防火牆的安全能力再次升級:能夠在秒級內實施線上檢索千萬級的併發請求,精準識別惡意流量,並進行攔截;如果有新的攻擊方式出現,在小時內,阿里雲的安全工程師就會自動實現防火牆的升級,實現自動防護更新。

cd08361176430bb56c96fb2a33e83ce8c930a0e6

通過人工智慧,就可以讓圖片能夠被分析,阿里雲印刷文字識別完成了雙11海量文字的識別。

b937441951b7df5312a75c8b3fdbce9fdca45f4e

雙11大屏是流計算的一個能力應用,但何雲飛認為,今天企業要實時、動態的掌握海量的實時資訊,都需要藉助流計算。阿里雲流計算引擎,能夠實現最大億級吞吐流量,毫秒內的延時,並且支援各種各種的資料來源,這也是雙11錘鍊出來的能力。

距離下一個雙11還有 354天,但是下一個脈衝計算,可能就在下一秒,數字化時代,雙11是極致的商業效率和運營效率的綜合體現,現在每個企業都可以擁有這樣的能力。