1. 程式人生 > >未來網際網路+大資料時代

未來網際網路+大資料時代

 

未來應該是移動網際網路+大資料並存的時代,未來企業之間的競爭是資料的競爭。本文從網際網路大資料發展現狀、市場規模、需求分析、商業大資料價值、資訊保安性、企業發展形態等方面簡要分析在DT時代下網際網路大資料應用。

大資料已經滲透到當今每個行業和業務功能區域,成為一個重要的生產要素。未來的時代不是IT時代,而是DT時代。大資料的價值越來越顯著,在各個領域的作用也越來越重要。未來企業之間的競爭不再是其他的競爭,而是資料的競爭。

大資料技術的戰略意義不在於掌握龐大的資料資訊,而在於對這些含有意義的資料進行專業化處理。大資料在於提高對資料的“加工能力”,通過“加工”實現資料的“增值”。

 

在這裡還是要推薦下我自己建的大資料學習交流群:199427210,群裡都是學大資料開發的,如果你正在學習大資料
,小編歡迎你加入,大家都是軟體開發黨,不定期分享乾貨(只有大資料軟體開發相關的),包括我自己整理的一份
最新的大資料進階資料和高階開發教程,歡迎進階中和進想深入大資料的小夥伴加入

 

未來是移動網際網路+大資料並存時代

網際網路+戰略經過四五年的發展已經從第三產業滲透到國計民生的所有行業裡面了。網際網路+戰略,更多的是跨界聯合,網際網路+戰略是現在的重要課題,特別是網際網路+工業,車聯網、物聯網。

未來是什麼?

第一,未來是移動網際網路+大資料並存的時代

如果說未來世界是萬物互聯的物聯網,肯定是對的,但如果只是物和物的連線,沒有人和人的連線,就會死氣沉沉。未來應該是移動網際網路+大資料並存的時代,人和人的連線,人和物的連線,物和物的連線以及人和服務的連線。

第二,未來應該是IT到DT的時代

從資訊化變成大資料,因為資訊化只是一個符號,變成大資料以後才能真正成為一個活的資料,為企業決策提供支援。過去討論的網際網路+大多是關於模式,更關鍵的是技術創新,技術創新要跟模式結合在一起。所以未來是網際網路+加上大資料技術創新並存的時代。

網際網路、金融和電信三大領域的大資料應用在各行業總規模中所佔比重超過70%;健康醫療領域和交通領域近年不斷“上架”新應用,但行業規模佔比相對較小。

網際網路大資料產業發展現狀

隨著網際網路使用者激增,手機已經實現了資料化、寬頻化。在瀏覽網站上、使用裝置上、通訊服務系統裡,資料都以指數級的速度增長。而具有資源優勢的運營商正好位於大流量、大資料資訊“金礦”上。

目前大資料應用相對其他產業比較成形的就是網際網路企業,這些握有大量資料資產的網際網路企業正急於如何將大資料資訊化轉化為商業價值。

提升使用者體驗,進行精細化運營,提高網路營銷效率

網際網路企業以及運營商擁有下面類資料:

一是使用者賬號裡基礎資料;

二是協議型別如套餐服務得到的使用者消費能力;

三是業務型別資料,如使用者選擇的遊戲、閱讀、音樂類,代表個人興趣、愛好的資料;

四是訪問的URL,使用者經常看的網站、搜尋關鍵詞等;

五是終端資訊,每個終端能力、特徵不同,最終使用的業務也會不同。

基於以上資料,通過大資料分析手段,找到最合適和滿足使用者需求的產品特點,從而指導產品設計開發,業務上線後持續跟蹤分析使用者的線上訂購、使用問題等,為優化業務策略提供資料支援,提高業務質量和客戶體驗。最終達到精細化網路營銷,提高客戶滿意度和銷售效率。

在網際網路大資料助推下進行的商業模式創新及業務的延伸。大資料不僅幫助企業優化運營績效,更重要的是,網際網路大資料給企業帶來了業務創新的機遇和能力。

未來全球電子商務一定是社會化的,因為沒有任何一家公司有能力建立一家快遞公司運貨到全世界各地,也沒有任何一家公司能夠採購到全世界的商品賣給全世界的消費者。而阿里巴巴通過打造商業的基礎設施,吸引賣家、快遞等各方公司參與,通過這種商業創新模式將各行業企業連線到生態圈裡,進而打造全球電子商務的一體化。

此外網際網路大資料應用日益得到人們的認可,越來越多的行業開始關注、開發應用網際網路大資料。醫療保健、零售商、製造業等傳統行業已開始積極挖掘網際網路資料帶來的商業價值。

2020年大資料產業將突破1萬億元

根據國務院印發的《國務院關於促進資訊消費擴大內需的若干意見》規劃,截止至2015年,中國資訊消費規模超過3.2萬億元,年均增長20%以上,帶動相關行業新增產出超過1.2萬億元,其中基於網際網路的新型資訊消費規模達到2.4萬億元,年均增長30%以上。

按此推算,資訊消費的增量部分規模將佔到GDP增量部分規模的12%左右,每年為GDP增長貢獻大約1個百分點,並且可以帶動全國相關產業的發展,這將極大地促進中國經濟持續、平穩地發展。基於電子商務、雲端計算等資訊平臺的消費快速增長,自2014年中國網際網路使用者資料市場進入快速發展。

《大資料產業發展規劃(2016—2020)》提出,到2020年,大資料相關產品和服務業務收入突破1萬億元,年均複合增長率保持30%左右,大資料在創新創業、政府管理和民生服務等方面廣泛深入應用。

未來如何在蒐集、儲存大資料的基礎上更好地整合、分析和應用,將成為優化“資料大腦”的重點課題。

網際網路大資料需求分析

傳統產業人士通常認為大資料是大型網際網路公司的“專利”。當龍頭企業通過網際網路平臺將大資料應用連線到傳統企業,並帶來巨大的商業價值後,通訊行業、金融行業、服務零售業以及傳統的裝備製造業等,都紛紛開始進軍大資料。

根據調查顯示,32.5%的公司正在搭建大資料平臺,處於測試階段;約29.5%的公司已經在生產環節實踐大資料,並有成功的產品。總體看目前正在開發和已經使用的大資料應用平臺佔比超過6成,而準備開發的佔24.52%,並且這個比例還會日漸上升,說明企業對大資料的需求明顯加大。

目前網際網路大資料平臺應用場景主要集中在社交網路、B2C業務、精準營銷、線上音視訊業務、廣告監測五個大的方向。最終目的都是將網際網路資料資源轉化為商業資產進行變現。因此很多企業積極組建大資料研發團隊。

對大資料有需求的公司中,超三成的研發團隊僅有1-10人,次居第二的10-50人的規模佔到了25.65%,兩種規模的研發團隊就超過5成。可見,當下對大資料的需求已經不止大型公司,大資料的市場需求正不斷增長。

網際網路大資料應用價值方向

對顧客群體細分

“大資料”可以對顧客群體細分,然後對每個群體量體裁衣般的採取獨特的行勱。瞄準特定的顧客群體來進行營銷和服務是商家一直以來的追求。雲端儲存的海量資料和“大資料”的分析技術使得對消費者的實時和極端的細分有了成本效率極高的可能。

模擬實境

運用“大資料”模擬實境,發掘新的需求和提高投入的回報率。現在越來越多的產品中都裝有感測器,汽車和智慧手機的普及使得可收集資料呈現爆炸性增長。

雲端計算和“大資料”分析技術使得商家可以在成本效率較高的情況下,實時地把這些資料連同交易行為的資料進行儲存和分析。

交易過程、產品使用和人類行為都可以資料化。“大資料”技術可以把這些資料整合起來進行資料探勘,從而在某些情況下通過模型模擬來判斷不同變數(比如不同地區不同促銷方案)的情況下何種方案投入回報最高。

提高投入回報率

提高大資料成果在各相關部門的分享程度,提高整個管理鏈條和產業鏈條的投入回報率。

大資料可以通過雲端計算、網際網路和內部搜尋引擎把”大資料”成果和“大資料”能力比較薄弱的部門分享,幫劣他們利用“大資料”創造商業價值。

個性化精準推薦

在企業運營商內部,根據使用者喜好推薦各類業務及應用是常見的,比如應用商店軟體推薦、IPTV 視訊節目推薦等,而通過關聯演算法、文字摘要抽取、情感分析等智慧分析演算法後,可以將之延伸到商用化服務,利用資料探勘技術幫劣客戶進行精準營銷,今後盈利可以來自於客戶增值部分的分成。

很多人討厭廣告的原因,在於它推送的是對你無用的資訊。網際網路的出現更是放大了這一特點,而如今人們發現自己搜尋過的或者買過的商品都能被針對性的推薦,出現在瀏覽的網頁廣告中。

這便是隨著資訊數量的持續增加,大資料的到來,在這些資料中,隱藏了消費者的消費習慣、市場的變化、產品的趨勢以及大量的歷史記錄,這些關鍵資料對於企業和組織的後續運營和發展起到了至關重要的作用。

更準確的營銷手段已經成為了一種廣告工具,這種個性化的廣告推廣,主要是為了縮小範圍來針對某一類人群。

資料儲存空間出租

企業和個人有著海量資訊儲存的需求,只有將資料妥善儲存,才有可能進一步挖掘其潛在價值,具體而言,這塊業務模式又可以細分為針對個人檔案儲存和針對企業使用者兩大類。

主要是通過易於使用的API,使用者可以方便地將各種資料物件放在雲端,然後再像使用水、電一樣按用量收費。

管理客戶關係

客戶管理應用的目的是根據客戶的屬性(包括自然屬性和行為屬性),從不同角度深層次分析客戶、瞭解客戶,以此增加新的客戶、提高客戶的忠誠度、降低客戶流失 率、提高客戶消費等。對中小客戶來說,與門的 CRM 顯然大而貴。

資料精準搜尋

資料搜尋是一個並不新鮮的應用,隨著“大資料”時代的到來,實時性、全範圍搜尋的需求也就變得越來越強烈。我們需要能搜尋各種社交網路、使用者行為等資料。

其商業應用價值是將實時的資料處理不分析和廣告聯絡起來,即實時廣告業務和應用內移勱廣告的社交服務。運營商掌握的使用者網上行為資訊,使得所獲取的資料“具備更全面維度”,更具商業價值。

隱私安全

大資料已經與我們的生活息息相關。微博的社交關係,淘寶的購物記錄,GPS導航的移動資料,快遞的物流資訊……這些形形色色的資料包括了人們的各種行為細節,同時也記錄了人們大量的個人隱私。

不難看出,大資料時代的到來,給傳統的網路與資訊保安帶來了新的問題,傳統防禦威脅的手段已逐漸失效。大資料將安全帶入了一個全新、複雜和綜合的時代,不安全的那些蛛絲馬跡在浩瀚資料的掩護下,正在精準地發起一次又一次的攻擊。

近年來,有關網路威脅導致伺服器宕機、個人和企業資訊洩露事件頻繁發生,網路資訊保安問題已成為全球關注的焦點。然而,任何事物都具有兩面性,人們常常擔心大資料帶來的不安全性,但同時大資料技術也是一種保戶資訊保安的工具。

對於網際網路,利用傳統安全裝置從終端資料或本地網路中發現未知的威脅,就如在森林中找到指定的葉子,效率極低。從技術、人員、資料等幾個方面擁抱大資料技術,基於資料為驅動來解決問題。

在資料採集、測試、分析的過程中以威脅為中心,利用資料來驅動安全是一種檢測APT型別威脅(高階持續性威脅)的有效手段。

網際網路大資料之資訊保安性

資料作為大資料產業中的核心資源,已成為各家企業、平臺的爭奪物件。為採集資料,眾多網站平臺、聯網裝置、應用軟體“各出奇招”。連手電筒應用都要求讀取手機通訊錄、使用麥克風和攝像頭,實在不合理。

究其原因,是因為資料變得值錢了。大資料是海量資料的聚合,沒有資料,大資料如同無源之水。合法企業通過使用者資料提供精準、便捷的個性化服務,從而實現商業變現,讓大資料產業有利可圖。

除了政府開放的資料和企業自身收集的資料,資料交易也是資料的重要來源,但也在某種程度上催生了黑色產業鏈。正規資料交易市場的交易額約為100億元,正規交易的資料需要經過採集、清洗、脫敏、脫密、融合等流程,保障了資料的合法性、真實性和安全性,成本也相應提高。

大資料技術不斷創新演進,傳統網路安全技術也面臨嚴峻挑戰。《中國大資料發展調查報告(2017年)》顯示,企業在選購大資料軟體產品時,產品安全性和穩定性成為最重要的考慮因素。大資料背景下的攻擊者通過人工智慧、機器學習等新技術對攻擊工具進行升級,提高網路攻擊的精確度和隱蔽性。安全保護技術手段亟待強化更新,構建更可靠、更有效的大資料安全保障技術體系。

網站和手機應用越界收集使用者資料,根本原因是為了追逐商業利益。企業收集使用者資料時,要尊重使用者的知情權、退出權和自由選擇權。要明確大資料和個人資訊之間的關係:個人資訊屬於隱私權範疇,而大資料一部分來源於個人資訊,但本質是智慧財產權。

現階段《網路安全法》落實尚未到位,在制度上、人員上、技術防控上還有很大差距。立法不代表問題完全解決,還要加大力度、嚴格執行,大資料技術上也要配合跟進,一步一個腳印,切實提高網路安全水平。

網際網路大資料“路障”

國內資訊資料資源80%以上掌握在各級政府部門手中。在《關於推進公共資訊資源開放的若干意見》《政務資訊系統整合共享實施方案》等相關檔案的推動下,政府資料加快共享開放的步伐,惠民成績單亮點不斷。

然而,由於國內大資料發展還處在起步階段,不少基礎性、關鍵性資料仍被政府部門束之高閣,共享開放程度低,成為現代化治理程序中的“路障”。

有效的資料收集是實現共享與開放的基礎。部分政府部門在資料收集的過程中,由於缺乏統一的標準,收集到的資料雖然量大,但質量不高,可利用價值低。

由於目前資料共享開放的法律、政策環境尚不成熟,一些地方政府職能部門評估資訊是否要開放等問題時,往往有所推脫。如果資料毫無關聯地沉澱在各部門的資訊系統中,缺乏共享開放的意識,甚至把資料資源視為“私產”,就會造成條塊分割、重複建設,形成壁壘森嚴的“資訊孤島”。

供給與需求脫節也讓資料共享和開放效果打上折扣。截至去年底,廣東省全省87個省直部門有6988類資料資源、62332項資訊項,居全國各省(區、市)首位。但各部門提出共享需求僅3649類,省級編目共享僅477類,資料難以真正發揮利民惠民、支撐政府決策的作用。

此外,儘管部分資料已接入共享開放平臺,但由於不能被機器讀取,成為無法釋放應有活力的“休眠資料”。《2017中國地方政府資料開放平臺報告》顯示,截至去年4月,全國19個地方政府資料開放平臺的8398個開放資料中仍有約25%的機器可讀性較差。

去年12月6日召開的國務院常務會議提出,提供公共資料是政府公共服務的重要內容,要求對分散、獨立的政務資訊系統加快清理整合,統一接入國家資料共享交換平臺,並依法依規向社會開放。如何繼續加快資料共享開放的程序,讓群眾真正享受到資料共享開放帶來的紅利,是未來大資料工作的重點和難點。

大資料企業形態發展展望

隨著大資料技術的發展和應用,其或許會從所有流程由一個企業完成,轉化成每一環節都由單獨企業來完成的一整條產業鏈。

第一類企業為資料採集公司,它就對應於現在商業中的原材料生產商,專門負責原材料(資料)的採集與儲存;

第二類為資料探勘公司,它相當於現在的加工企業,從資料採集公司裡採購原材料(資料),然後加工出資料關係,再出售給最後的資料應用公司;

第三類為資料應用公司,對應於現在最多的代理商,這些一二級代理商,會通過收購來的原材料(資料關係)的質量(放映規律的程度),以及商業應用程度(業務與規律結合得更好)來形成競爭關係。

網際網路與大資料的價值最好的體現在對已有行業潛力的再次挖掘,而不僅在於自身能生產多少新東西,用網際網路思維和大資料思維去重新提升傳統行業,使得資訊透明化、對稱化,對產生的大資料進行整合利用,也使得資源得到最大化利用。

網際網路是獲取、傳播和擴散相關資訊的重要渠道。通過網際網路大資料的實時分析,實現對社會思潮變化的準確判斷,提高社會治理能力,實現“數字中國、智慧社會”。

隨著網際網路的快速發展產生大資料,大資料反過來加速推動網際網路各種各樣應用的演進。微構科技相信在可預見的將來,通過對大資料的全面挖掘將產生更多新的應用,將促使產生更多的新業態,將給人類生活帶來更多的便利和驚喜。