1. 程式人生 > >什麼是飛天?全球級大資料計算平臺,自主研發!

什麼是飛天?全球級大資料計算平臺,自主研發!

又一個註定載入史冊的日子!7月25日。

又一個註定讓人更有底氣的核心科技!阿里雲飛天大資料平臺!

這是目前國內規模最大的計算平臺,當然也是全球級的。

它可以擴充套件到10萬臺計算叢集,用通俗的比喻,就相當於把10萬臺計算機組成一個巨大的計算力池子,當成一臺超級計算機來使用;單日資料處理量超過600PB,相當於6億部高清的電影。

大資料的重要性不言而喻,正當企業級資料已經不在話下的時候,越發體現出國家級資料量處理平臺的可貴。

更重要的是,飛天是中國唯一一個自主研發的計算引擎。全球掌握這種技術的公司,僅用一隻手就能數完,微軟、亞馬遜、谷歌,以及來自中國的阿里巴巴

難,也要幹。不難要你幹什麼?

“大資料”顧名思義,規模越大,價值越大。當然,計算難度也就越大!

早年間,總部位於加利福利亞的資料庫軟體公司Greenplum、Hadoop提供的開源技術,支撐了大多數網際網路公司的大資料計算需求。

然而到了2008年時,中國網購註冊使用者暴增185%,已達1.2億人,淘寶網上承載了9800萬名註冊會員。阿里巴巴意識到,依靠開源技術無法支撐未來中國網際網路使用者井噴的需求,自主研發大資料處理平臺勢在必行。

但很少有人知道,在飛天“一飛沖天”之前,阿里巴巴的技術研發行走在無人區。

那時,一頭扎進雲端計算的中國公司只有阿里巴巴一家。自研雲端計算能否成功?穩不穩定?安不安全?對飛天不計成本地投入人才、資源和時間,使得從外界到公司內部的懷疑一浪高過一浪。

2013年8月15日,被認為“飛不起來”的飛天終於突破了核心技術,正式上線5000臺伺服器叢集——這使得阿里成為世界上第一個對外提供5K雲端計算服務能力的科技公司。

到2016年2月,飛天的單叢集規模超過10000臺;三年之後,再擴大10倍至10萬臺。

2015年,飛天重新整理了“世界計算奧運會”SortBenchmark的世界紀錄,用377秒完成100TB的資料排序,打破了經典的計算引擎Apache Spark的1406秒紀錄;

2016年,它再次重新整理SortBenchmark的世界紀錄,打破了亞馬遜AWS自2014年起保持的世界紀錄。中國自主研發的計算平臺令世界刮目相看。

2017年,飛天雲作業系統獲得中國電子學會16年來頒發的唯一一個科技進步獎特等獎。這個每一行程式碼都由自己敲下的大資料平臺,現在服務了全球200多個國家和地區、數以百萬計的政府部門和企業。

僅以杭州為例,“城市大腦”可以在數分鐘內優化1300個核心路口、萬級交通配時的控制引數,處置110種交通警情,日均自動發現警情3萬餘起,是傳統接處警數量的9倍。

衢州、上海、蘇州、澳門、吉隆坡、北京、重慶、海口等境內外十幾個城市先後落地城市大腦,這個資料驅動的“思考中樞”已覆蓋交通治理、環境保護、城市精細化管理、區域經濟等諸多城市治理領域。

上萬家企業已全面遷移到雲上。一個全社會的全面上雲的拐點已經到來。

一代科技人背後,是我們時代的幸運

許多發展關鍵核心技術的故事,都有著類似的艱難與孤獨。

就如當年的萬噸水壓機問世,讓新中國具備了製造重大裝備的條件。

綿陽風洞群,支撐了中國一代代戰鬥機的誕生。

連續多年霸佔全球超算榜首的太湖一號帶來的對航天事業的貢獻。

中國首個諾貝爾生理學或醫學獎得主屠呦呦在為世界帶來青蒿素和雙氫青蒿素前,經歷了半個世紀的低頭耕耘。

全球衛星導航系統北斗背後,是8萬多人“朝受命,夕飲冰;晝無為,夜難寐”,奮鬥超過20年。

時代正在斗轉星移,社會的重器也在隨之發生戰略轉移。

在1881年德國人西門子發明電車前,馬車是城市最重要的驅動力。

電力時代造就了工業時代的繁榮,迄今,我們已經不能想象沒有電,人類會怎樣。

到今天,算力必將像電力超越馬力一樣,成為數字時代價值流通的主引擎。所以,算力強大與否很大程度上決定了經濟發展、社會治理的核心效率。

作為資料大國,要走向資料強國,從資料當中找尋增長的動力,那就非打造強大的計算引擎不可。

而沒有自主的大資料計算平臺,我們很可能無法控制紅綠燈,不能排程飛機……一切就將亂套,人類距離崩潰只有一個大資料平臺!

毋庸諱言!飛天大資料平臺就是數字化時代的核心技術。這是中國在新一輪科技革命中把握機遇的關鍵。

如果核心技術沒有自主創新,數字化發展就會受到制約。而發展核心技術,意味著不計成本的投入、面對曲折的韌性和為社會創造價值的強烈使命感。

時不我待,唯有堅持自主創新,不斷攻堅前沿技術發展戰線,才能實現核心技術的根本性突破。勇於突破、精於創造,大力投入核心技術自主研發。

在這個能夠迎頭趕超的時代是幸運的,與這些科技公司和科技人才同在這個時代,更是榮耀的!

 

本文作者:晉恆

原文連結

本文為雲棲社群原創內容,未經