隨著人們對大資料的預測和預期不斷加速，企業資料團隊發現自己正處於一個快速變革的領域，既受到各種可能性的鼓舞，又因為各種侷限性受折磨。2018年，大資料將繼續沿著這兩條路線發展：提供更多提高了可訪問性的選擇，同時又讓那些尋找所有複雜問題答案的企業感到沮喪。

在這裡我還是要推薦下我自己建的大資料學習交流qq裙： 957205962， 裙 裡都是學大資料開發的，如果你正在學習大資料 ，小編歡迎你加入，大家都是軟體開發黨，不定期分享乾貨（只有大資料開發相關的），包括我自己整理的一份2018最新的大資料進階資料和高階開發教程，歡迎進階中和進想深入大資料的小夥伴
 

處理大資料的四個環節：

 

收集：原始資料種類多樣，格式、位置、儲存、時效性等迥異。資料收集從異構資料來源中收集資料並轉換成相應的格式方便處理。

 

儲存：收集好的資料需要根據成本、格式、查詢、業務邏輯等需求，存放在合適的儲存中，方便進一步的分析。

 

變形：原始資料需要變形與增強之後才適合分析，比如網頁日誌中把IP地址替換成省市、感測器資料的糾錯、使用者行為統計等。

 

分析：通過整理好的資料分析what happened、why it happened、what is happening和what will happen，幫助企業決策。

圖表：大資料的各個環節

資料來源：中研普華

 

大資料研究意義

 

1、對資訊科技產業的影響

 

大資料的熱潮興起於新一代資訊科技的融合發展，物聯網、移動網際網路、數字家庭、社會化網路等應用使得資料規模快速擴大，對大資料的處理和分析的需求日益旺盛，推動了大資料領域的發展。反過來，大資料的分析、優化結果又反饋到這些應用中，進一步改善其使用體驗，支撐和推動新一代資訊科技產業的發展。

 

大資料將為資訊產業帶來新的增長點。2020年世界資料總量將達40萬億GB，人均5.2TB。面對爆發式增長的海量資料，基於傳統架構的資訊系統已難以應對，同時傳統商業智慧系統和資料分析軟體面對以視訊、圖片、文字等非結構化資料為主的大資料時，也缺少有效的分析工具和方法。資訊系統普遍面臨升級換代的迫切需求為資訊產業帶來新的、更為廣闊的增長點。

在這裡我還是要推薦下我自己建的大資料學習交流qq裙： 957205962， 裙 裡都是學大資料開發的，如果你正在學習大資料 ，小編歡迎你加入，大家都是軟體開發黨，不定期分享乾貨（只有大資料開發相關的），包括我自己整理的一份2018最新的大資料進階資料和高階開發教程，歡迎進階中和進想深入大資料的小夥伴

同時，大資料將加速資訊科技產品的創新融合發展。大資料面臨著有效儲存、實時分析等挑戰，必將對晶片、儲存產業產生重要影響，將推動一體化資料儲存處理伺服器、記憶體計算等產品的升級創新。對資料快速處理和分析的需求，將推動商業智慧、資料探勘等軟體在企業級的資訊系統中得到融合應用，成為業務創新的重要手段。

 

2、對資訊科技應用的影響

 

大資料的效用不僅僅是在移動網際網路上，它被認為是繼雲端計算、物聯網之後資訊科技產業又一次顛覆性的技術變革，對經濟發展、企業的決策、組織和業務流程、個人生活方式都將產生巨大的影響。目前，大資料的開發和利用在國內還處於起步階段，一些電子商務企業利用大資料做一些研究報告和趨勢分析，而從趨勢看，未來大資料將會拓展到科研和政府管理領域。

 

大資料時代的來臨對資訊科技應用的影響主要有兩個方面：一方面促使資料獲取、資料儲存更廣泛，如出現雲端計算、雲端儲存；另一方面激發了資訊科技挖掘資料的強烈需求，未來發展更趨向於資訊的價值提升和決策智慧化，例如建設智慧城市。

 

大資料目前在兩個方面表現出最重要的價值，一是促進資訊消費，加快經濟轉型升級，二是關注社會民生，帶動社會管理創新。

 

傳統制造業有了大資料，可以從“製造”向“智造”升級——從產品設計端到最終銷售，都可以通過大資料進行智慧分析。企業可以快速響應市場需求、科學研發產品，並且精準營銷。目前汽車行業已在藉助大資料，對數億網民與汽車相關的請求進行大資料探勘，形成行業指數和分析報告，幫助汽車企業瞭解消費者需求。內容創新方面，手機、電視、冰箱等傳統電子和電器產品，由於有了大資料，產品變得智慧化，激發了使用者的新一輪消費需求。消費者的強勁需求，又直接促進了企業利用大資料進行產品形態和內容的創新。

 

社會管理創新方面，春運遷徙地圖這個普通人親近大資料的案例，是交通領域基於資料的一次新嘗試。未來在教育、就業、公共衛生等眾多關鍵領域，大資料的分析洞察，也將發揮越來越重要的作用。

 

圖表：中國大資料產業市場規模

資料來源：中研普華

 

中國大資料產業發展特徵

 

一是頂層設計不斷加強，政策機制日益健全。發改委工信部網信辦等46個部委共同建立了促進大資料發展部際聯席會議制度，全國有30多個省市制定實施了大資料相關的政策檔案。 

 

二是關鍵的技術領域不斷取得突破，創新能力顯著增強。大資料的軟硬體自主研發的實力快速提升一大批大資料的技術和平臺處理能力也開始躋身世界的前列。

 

三是行業應用逐漸深入，對經濟發展的帶動作用凸顯。包括在電信、網際網路、交通、金融、工業、農業、醫療等行業的應用不斷深化，大大改善了人們的生產生活方式。 

 

四是區域佈局持續優化，產業規模不斷壯大。全國推進建設了八個國家大資料綜合試驗區，開展大資料方面的實踐探索，形成了一批集聚發展區。 

 

五是產業發展環境日益完善。大資料的基礎設施法律法規標準體系安全保障能力，包括產業生態人才隊伍都在不斷的加強。

三、中國大資料產業集聚現狀

1、京津冀大資料產業發展概況

 

依託北京，尤其是中關村在資訊產業的領先優勢，培育了一大批大資料企業，並將集聚勢能擴散到天津和河北等地，形成了京津冀大資料走廊格局。

 

中關村作為中國的“矽谷”，是中國網際網路發展的引擎。在“京津冀”大資料產業一體化發展的背景下，已經形成了“中關村技術研發——天津裝備製造——張家口、承德資料儲存”這樣分工合理、協同發展的大資料走廊發展模式。“十三五”期間，中關村目標引進100位大資料相關頂尖人才，100個創業團隊；佈局人機互動、人工智慧、虛擬現實等關鍵技術；落地5家國際一流研究機構和5家交易評估機構；建成30個數據共享平臺和20個創業孵化平臺；建設3個大資料產業園並落地50個大資料產業專案；培育600家擁有關鍵技術和6000傢俱有應用能力的企業；打造全球大資料創新中心。

 

2、珠三角大資料產業發展概況

 

依託廣州、深圳等地區的電子資訊產業優勢，發揮廣州和深圳兩個國家超級計算中心的集聚作用，在騰訊、華為、中興等一批骨幹企業的帶動下，珠三角地區逐漸形成了大資料集聚發展的趨勢。

 

根據廣東省的資料機房建設情況估計，當前廣東省資料儲存量約為2300PB，成為了我國重要的大資料產業集聚區域，培育了一批實力較強的大資料創新企業，呈現出“廣深引領、珠三角集聚、粵北東西緊隨”的發展態勢。

在這裡我還是要推薦下我自己建的大資料學習交流qq裙： 957205962， 裙 裡都是學大資料開發的，如果你正在學習大資料 ，小編歡迎你加入，大家都是軟體開發黨，不定期分享乾貨（只有大資料開發相關的），包括我自己整理的一份2018最新的大資料進階資料和高階開發教程，歡迎進階中和進想深入大資料的小夥伴

3、長三角大資料產業發展概況

 

將大資料與當地智慧城市、雲計算髮展緊密結合，吸引了大批大資料企業，促進了產業發展。上海釋出《上海推進大資料研究與發展三年行動計劃》，南京依託智慧城市建設，推動大資料在城市管理和民生服務領域應用。

 

在杭州，既有以“阿里雲”為代表的雲服務基礎設施提供商，又有以華為為代表的雲工程和雲服務提供商，還有海量的雲應用企業，雲產業鏈日漸清晰。在十三五期間，杭州計劃培育包括阿里在內的2-3家國際知名百億級雲端計算和大資料企業；打造200家中小型雲端計算和大資料服務企業；帶動資訊科技業新增營業收入超過1000億元，努力推動大資料發展與雲端計算有機結合。

 

4、西南大資料產業發展概況

 

西南大資料聯盟致力於加強資料的互聯互通，促進更多的跨界合作；同時也將全力推進西南大資料的產業發展。

 

西南大資料聯盟由西南地區從事大資料相關產業的單位組成，有16家發起單位，涵蓋了金融大資料、醫療大資料、政府大資料等。從緊張籌備開始到正式揭牌，西南大資料聯盟歷時了3個月。揭牌儀式的舉行，標誌西南大資料聯盟的溝通機制正式建立。

 

聯盟將積極推廣新技術、新產品、新應用，促進資料融合、應用融合，包括加強產業鏈的整合。同時，還將共同推動和維護西南大資料產業及應用的健康、有序和可持續發展。

 

下一步西南大資料聯盟將建立金融、醫療、政務等5個方向的專家委員會，對行業的需求、新技術的運用、產品的推動等方面進行課題研究，真正的把資料運用到行業中，推動新產品新應用的發展。

在這裡我還是要推薦下我自己建的大資料學習交流qq裙： 957205962， 裙 裡都是學大資料開發的，如果你正在學習大資料 ，小編歡迎你加入，大家都是軟體開發黨，不定期分享乾貨（只有大資料開發相關的），包括我自己整理的一份2018最新的大資料進階資料和高階開發教程，歡迎進階中和進想深入大資料的小夥伴