1. 程式人生 > >大資料分析技術的廣泛應用

大資料分析技術的廣泛應用


CDA資料分析師原創作品

在這個資訊數字化的時代,“大資料”幾乎是每一個與數字打交道、與資訊接軌的時代發展參與者都在談論的一個詞語,這不僅僅是時代發展的一個趨勢,也是技術創新的一個熱潮。可以說,大資料分析技術對公司的發展、行業的未來走向不單單發揮了智慧化的決策指導和準確預測的作用,還可以讓企業在全行業競爭激烈的境地中脫穎而出。因此對大資料分析的戰略佈局讓越來越多的企業對資料分析有了全新的認識和前所未有的重視。

在當前各個領域的行業中,大資料分析技術的應用已十分廣泛,俗話說“有資料的地方就有資料分析”。大資料真能改變並提升企業的運作方式嗎?答案是肯定的。隨著企業對大資料分析技術應用的利愈發密切和廣泛,我們每天都會看到大資料反饋給我們新的客觀科學的資訊,協助人們從中真正的獲得自己想要的東西。此外,大資料分析技術的應用早已廣泛深入我們生活的方方面面,涵蓋了醫療、交通、金融、教育、體育、零售等各行各業。

從阿爾法圍棋(ALphaGo)第一次擊敗人類職業圍棋選手,成為第一個戰勝圍棋世界冠軍的人工智慧機器人開始,AI人工智慧就開始引起人們的深思和發問。人工智慧是讓機器能夠像人類一樣完成智慧任務的技術。自然語言處理是建立能夠理解語言的系統,人工智慧的一個分支,除此之外還有機器學習、神經網路、深度學習。自然語言處理是應用比較廣泛的一個分支,我們可以進一步瞭解。自然語言處理(NLP:Natural Language Processing)是指機器理解並解釋人類寫作、說話方式的能力。NLP的目標是讓計算機/機器能夠像人類一樣智慧的理解語言,最終目標是彌補人類交流(自然語言)和計算機理解(機器語言)之間的差異。
在這裡插入圖片描述


如今所有資料中的80%都可被用到,大資料來自於大公司、企業所儲存的資訊。例如,志願資訊、公司採購、銷售記錄、經濟業務以及公司、社交媒體的歷史紀錄等。儘管人類使用的語言對計算機而言是模糊的、非結構化資料的模式,但有了NLP的幫助,我們可以解析這些大型的非結構化資料中的模式,從而更好地理解裡面包含的資訊。NLP可使用大資料解決商業中的難題,比如零售、醫療、進入領域中的業務。有一個已經被很多人接觸過的人工智慧應用——聊天機器人,就是通過聊天app、聊天視窗或語音喚醒app進行交流的計算機程式,例如,蘋果手機的siri,也有被用來解決客戶問題的智慧數字化助手,成本低、高效且持續工作,此功能淘寶店鋪有很多運用。

和很多行業不同,醫生是一個需要經驗的行業,需要掌握無數先輩積累下來的醫學知識並且在臨床工作中不斷驗證理論積累經驗,而基於深度學習的AI從某些角度和醫生一樣,都需要不斷的訓練,在實踐中不斷完善演算法模型。醫療領域的人工智慧主要有兩個方向,一個是基於自然語言處理,根據病歷和症狀診斷疾病;一個是基於計算機視覺,通過識別醫學影像診斷疾病。

以肺癌識別為例,AI可以通過兩種方式診斷肺癌,其中一種是基於自然語言處理,代表企業是IBM的Watson,在持續4年的時間內Warson學習了200本腫瘤領域的教科書,290種醫學期刊和超過1500萬份的文獻後,Watson開始被臨床應用,將病人的病歷資訊和症狀輸入系統,可以識別肺癌。如今Watson在肺癌、乳腺癌、胃癌等癌症領域已經可以為醫生提供診斷建議。

身處於大資料時代,不論是哪個行業,都大大小小受到大資料的影響,並且這種影響還會在持續擴大加深,大資料分析技術的的應用會讓人們更加得心應手地得到自己想要的資訊。而且,我們可以肯定的一點就是,無論大資料分析技術如何發展,還是無法離開以人為中心所產生的各種使用者行為資料,這些核心資料的相關性再加上可感知的裝置的智慧資料採集,它就構成了一個完整的大資料生態環境,我們即是大資料的創造者,同時也融為了大資料的一份子,共同生活在這個數字化越來越明晰的軌道里,創造著財富,也創造著更全新的自己!