看待大資料還需“大眼界”？
當人們享受被電商的大資料“算計”而帶來的方便和廉價時，有時也會陷入它是否有損實體經濟、是否破壞個人隱私等擔憂。糾結於此類擔憂甚至爭論，人們往往容易忽視大資料更巨集大的意義：在促進傳統行業升級改造、引領新興產業 ( 愛基 , 淨值 , 資訊 ) 和新興應用蓬勃發展、提升社會執行和管理效率等方面，大資料正引發新一輪革命。人們看待大資料的眼光也亟待與時俱進。
傳統產業大升級
“噴氣式客機一起飛，就會產生海量資料，”清華大學資訊科技研究院研究員薛一波接受新華社記者採訪時介紹，“分析客機實時傳輸的大資料，可實時掌握飛機的執行狀態，提前預警和發現潛在問題，採取預防、維修等措施，大大減少故障率。”
類似技術也應用在高鐵上。薛一波說，以往鐵路工人在鐵軌上敲敲打打，通過聲音檢查問題;如今，高鐵上的各種感測裝置可實時傳回車輛資料，通過大資料分析，即可實現故障預警、診斷、排查和定位，提高效率，降低成本。
他說，大資料分析可大幅提升傳統行業的執行效率、降低運維成本、提升資料價值，在歐美等發達國家，工業大資料應用已非常普及。“大資料技術推動傳統產業升級是必然的，”暨南大學資訊學院/網路空間安全學院副院長鄭力明對記者說，比如，德國積極推動包含工業大資料應用在內的“工業4.0”計劃，正是要進一步促使工業生產與資訊科技融合，使供應、製造、銷售各環節智慧化。鑑於大資料更廣泛的潛力，早在2012年，世界經濟論壇就釋出《大資料·大影響》報告指出，資料已成為一種像黃金和貨幣一樣的經濟資產。
如今，大資料巨大的商業價值正成為推動經濟變革的新引擎。中國工信部已印發《大資料產業發展規劃(2016-2020年)》，提出到2020年基本形成技術先進、應用繁榮、保障有力的大資料產業體系。大資料相關產品和服務業務收入將突破1萬億元人民幣，年均複合增長率保持30%左右。“現在的突出問題，一是許多傳統企業行業和機構缺乏新思維，沒有意識到，甚至不清楚大資料這種戰略資源的價值所在;二是缺乏機構間融合和深度合作，有資料的不知怎麼用，會用的沒有資料，因此需要打破條條框框、利益分割，共同促進大資料產業鏈的健康發展，”薛一波說，“除消費領域外，更多傳統企業的大資料思維應成為行業共識。”
“天算”挖掘大價值
“人算不如天算，天算就是雲端計算，”阿里巴巴集團董事局主席馬雲日前在深圳IT領袖峰會上強調了雲端計算的重要。谷歌、微軟、阿里巴巴和英特爾等科技巨頭相繼公佈的季報均顯示：雲端計算已成為這些技術巨頭最大的增長引擎。
如今，說起大資料，人們往往會提到雲端計算，可雲端計算與大資料又是什麼關係?可以說，大資料與雲端計算一個是問題，一個是解決問題的方法。在此我向大家推薦一個大資料技術交流圈： 658558542 突破技術瓶頸，提升思維能力 。
從問題看，當前社會的資料資源正呈指數級增長。薛一波說，2006年，個人使用者才剛剛邁進TB(1TB相當於10的12次方位元組)時代，而全球共新產生約180EB(1EB相當於10的18次方位元組)資料;到了2011年，這個數字達到1.8ZB(1ZB相當於10的21次方位元組)。有市場研究機構預測，到2020年，整個世界的資料總量將會達到35.2ZB。
對於如此大量的非結構資料，傳統計算機分析已難以勝任，集分散式計算、效用計算、網路儲存、虛擬化等為一體的雲端計算應運而生。通過雲端計算對大資料進行分析，才能釋放出更多資料的隱藏價值。
“因此，從技術上看，大資料與雲端計算的關係就像一枚硬幣的正反面一樣密不可分，”《大資料時代》作者、英國牛津大學教授維克托·邁爾-舍恩伯格這樣解釋。
他還認為，大資料要求人們改變對精確性的苛求，轉而追求混雜性，並找出資料間的關聯。這種思維的轉變將是革命性的，而云計算是發現並征服這些巨量混雜性資料的“利器”。
去年7月，美國高德納諮詢公司曾估計，未來5年內IT產業將有超過1萬億美元支出，直接或間接促進企業向雲端計算領域轉型。
與雲端計算相伴的是行業人才培養問題凸顯。全球知名職業人士社交網站“領英”公佈的最受僱主青睞且最搶手技能中，雲端計算排名第一。鄭力明也指出，目前中國發展大資料和雲端計算最大的問題在於人才，尤其是企業界需要大量人才。
打通訊息“大動脈”
統計顯示，目前我國資訊資料資源80%以上掌握在各級政府部門手裡，“深藏閨中”造成極大浪費。一些地方和部門的資訊化建設各自為政，形成“資訊孤島”和“資料煙囪”，給應用帶來不便。
中國人民大學調查與資料中心副主任、社會學系副教授王衛東認為，資料開放意義重大。因為大資料最初是用資料模型採集的各種資訊的總和，開放資料能幫助研究人員找到之前看來不相干的事物間的關聯，然後據此找到更精確的計算引數。開放程度越高，引數設定和分析就會越精準，得出的資訊參考價值越高。
正因如此，“開放資料”已成為一股世界性運動，各國政府則成為這場運動中最重要的物件。推動資訊跨部門跨層級共享共用，加快推進公共資料資源向社會開放，已經成為政府工作的重要目標。
2015年中國國務院印發的《促進大資料發展行動綱要》明確指出，資料已成為國家的基礎性戰略資源，要大力推動政府資訊系統和公共資料互聯開放共享，加快政府資訊平臺整合，消除資訊孤島，推進資料資源向社會開放，增強政府公信力，引導社會發展，服務公眾企業。
所謂資訊化，不僅在於“有”，更在於“通”。尤其是在網際網路時代，資訊必須實現有效流通和共享，才談得上“化”。當今世界，資訊化發展不進則退。加強資訊基礎設施建設，強化資訊資源深度整合，讓大資料思維與時俱進，才能打通經濟社會發展的資訊“大動脈”。
感謝您的觀看，如有不足之處，歡迎批評指正。
在此我向大家推薦一個大資料開發交流圈：
658558542 （ ☛點選即可加入群聊 ）
裡面整理了一大份學習資料，全都是些乾貨，包括大資料技術入門，大資料離線處理、資料實時處理、Hadoop 、Spark、Flink、推薦系統演算法以及原始碼解析等，送給每一位大資料小夥伴，讓自學更輕鬆。這裡不止是小白聚集地，還有大牛線上解答！歡迎初學和進階中的小夥伴一起進群學習交流，共同進步！
最後祝福所有遇到瓶頸的大資料程式設計師們突破自己，祝福大家在往後的工作與面試中一切順利。