袁 野
(武漢理工大學 政治與行政學院,湖北 武漢 430063)
從科技管理的角度淺談大數據在我國的發展
袁野
(武漢理工大學 政治與行政學院,湖北 武漢 430063)
近年來,p2p、移動互聯網等各項產業都發展得非常迅速,各個企業數據也增長很快,數據成幾何倍增長。而每一次的技術革命,都將引起巨大的社會變化和產業變革。從蒸汽機到互聯網,無數的技術創新改變著社會的生產力格局。信息化和網絡化發展又一次把個人、企業乃至國家帶入一個新紀元——大數據時代。
大數據;科技管理;發展
在現如今這樣一個信息化高度發達的時代,互聯網已經走進了千家萬戶,但是發展的同時也伴隨著問題:傳統的數據庫早已經無法滿足現如今信息化時代對數據收集、整理和分析的需要,在這個信息爆炸的時代,“大數據”應運而生。大數據,又可以被稱為“海量資料”,指所涉及的數據資料數量規模巨大到無法通過人腦甚至工具,在合理時間內達到獲取、管理、處理并整理來幫助企業做出更積極的決策。它的數據量大、種類多、時效性強,所蘊藏的價值大。目前可以說各行業都存在著大數據,但眾多的信息和咨詢是很復雜的,我們要想更好地運用大數據技術,就必須探索總結其深層次的規律。
1、什么是大數據?
大數據具有“4V”特性,即巨量(Volume)、繁多(Variety)、高價(Value)和快速( Velocity)。巨量:數據量巨大。如今,其體量已經從“萬億字節”級提升到了“千萬億字節”級。繁多:數據類型繁多。高價:高價值。有許多需要深度挖掘的有價值的信息都包含在在大數據之中。快速:處理速度快。在近幾年,云計算技術發展相當迅速,而在這隨之到來的大數據的時代,如何把云計算技術運用到大數據的處理分析中,讓大數據“如虎添翼”,是一個重要的問題。目前這個趨勢已經非常明顯,而且我們也可以預見到,在云計算與大數據“雙劍合璧”之時,大數據技術也就將使得這個信息化世界再一次呈現出爆炸式的發展。
2、大數據與科技管理
大數據技術不是一門單一的技術或者一個獨立的問題,而是許多學科交叉匯集的技術。從數據收集、整合、分析到最終的綜合運用,這一系列過程中所需要的技術龐雜且深奧。不僅如此,大數據所涉及的領域也相當廣泛,這不僅僅是因為它可以支持幫助許多領域,也因為它所需要收集的數據相當的巨大且復雜,因為只有這樣的海量數據才能支撐起大數據技術真正的運用。大數據技術在不斷地飛速發展,與此同時,大數據技術也在提升著科技管理、技術治理等方面的進步。大數據引領著科技管理的變革與管理思維的變革,而反過來看,要想沿用大數據的技術思維,我們必須先站在科技管理的角度將大數據層層剝析。一般而言,我們可以把大數據分為這樣三個層次:
(1)存儲層:把龐大復雜的數據全部數字化處理,然后存入載體。
(2)處理層:使用ETL( Extraction - Transformation - Loading) 工具對存儲層的數據進行采集、融合、分發等處理。
(3)應用層:將已經整合處理好的數據進行具體的分析和運用。
1、涵蓋廣闊的大數據
截至2012年11月,Data.gov(美國聯邦政府用于公開大數據信息的網站)共開放出了涵蓋農業、氣象、醫療、金融、交通、人口統計、就業、教育、能源等大約50個門類接近四十萬項數據。為方便公眾使用和分析,Data.gov平臺還加入了許多新功能,包括數據的分級評定、高級搜索、用戶交流以及和社會交網站互動等。
2、強有力的生產工具
有研究顯示,通過數據分析作出決策所收獲的生產力,要比其他因素驅使做出的生廠里高出5%到6%,大數據儼然已經成為了最強有力的生產工具。當這個變化來臨之后,不過是企業管理方式還是我們的生活方式都會有翻天覆地的變化,我們在做出任何決定的時候,都會下意識地參考大數據處理后的決策意見。所以說大數據所帶來的改變,不僅僅是技術上的改變,更重要的是企業管理、科技生產,甚至是我們生活方式、思維方式的改變。這對于我們來說是絕對的福音,因為大數據時代的來臨讓我們能夠在某種意義上拉近與發達國家的鴻溝,在處理技術與思維變革上都有了跨時代的飛躍。
1、我國大數據的國家戰略
當前,在政府部門數據對外開放,由企業系統分析大數據進行投資經營方面,上海無疑是先行一步。2014年5 月15日,上海市自今年起推動各級政府部門將數據對外開放,并鼓勵社會對其進行加工和運用。
2014年2月27日,中央網絡安全和信息化領導小組宣告成立,組長習近平指出,“沒有網絡安全就沒有國家安全,沒有信息化就沒有現代化。”從話的另一方面也說明目前我們沒有自己的過硬技術,網絡文化還有點問題,基礎設施還是太差,人才隊伍素質跟不上需求,也沒有可靠的盟友,信息經濟實力太弱。
2、中國與發達國家的差距
與發達國家相比,中國不管是在數據的收集還是后期數據的整合處理等方面都明顯落后很多。拿美國來說,美國聯邦政府有著漫長的數據收集歷史,這也與其政府先進的發展理念與高瞻遠矚的進步思想不無關系。幾個具有跨越式進步的數據量爆炸點:1940年的民意調查;其次在1962年,美國啟動了海浪監測計劃;接著是在1973年誕生的最小數據集。而在進入21世紀后,中國的數據收集才進入了爆發式增長期。
所以從這個意義上講,在2010年中國全年新增數據量不到美國的十分之一是可以讓人接受的,畢竟中國的信息化、數據收集等技術起步太晚。可是我們還是要意識到一個嚴重的問題:現如今,不管是人口、手機、還是互聯網用戶,中國可全部都穩居世界第一。
2015年,中國互聯網用戶預計已達到8.5億人,手機持有量接近13億部,都已經是美國的數倍。這個時候我們就會發現問題所在:手機與互聯網正是海量數據的重要來源,為什么我國在這兩項數量占絕對優勢的情況下,數據的收集量卻還如此至少呢?所以,套用一句俗語來說就是,“不是缺少數據,而是缺少發現數據、收集數據的眼睛。”而這個“眼睛”,也就是我們收集數據的意識和手段。在數據的整合處理階段技術明顯不如發達國家的我們,更加不能在收集數據這個起跑線上就落后太多。
3、大數據在我國的發展困境
(1)數據是否足夠豐富和開放。剛才上文提到,大數據技術是建立在一個海量數據的整合處理基礎之上的,第一步就是要收集數據,并且需要收集的數據可謂是紛繁復雜,種類多、跨領域。但是目前數據的收集也并非那么簡單,不僅是因為數據的“廣”和“雜”,更多的原因可能是因為數據的“利”和“秘”。政府部門和企業的數據公開都有著非常大的局限性,這也就導致了許多海量的數據無法匯集,那么后續的整合處理也更是無從談起。在這里,我國政策法規的不完善可能是主要原因之一:大數據的挖掘、整理、處理、分析、運用,都缺乏相應的立法,無法既保證共享又防止濫用。因此,要想讓更多的數據得到公開與運用,我們必須建立起一個更加綠色法制的信息環境,相應的法制健全也是迫在眉睫。
(2)是否掌握強大的數據分析工具。在解決第一步數據的收集后,接踵而來的是一個更加艱難的坎,那就是對于海量數據的整合處理。上文提到,我國在數據收集方面雖然有先天劣勢,但是我國的數據總量優勢會慢慢彌補在數據收集手段和意識上的差距。但是在下一步的收據整合和處理技術上,我國也是明顯落后于發達國家。很明顯,大數據的最終目的是要對海量數據進行綜合運用和分析后為決策者提供支持和幫助,而在這之前,更為關鍵的一步就是要對海量數據進行整合、處理。如果在這個技術上無法實現突破,那么就無法高效地將數據資源轉化為真正的價值。
(3)管理模式和運行模式與數據化決策相匹配。大數據技術運用的根本目的是以數據分析為基礎,為決策者提供支持與幫助,從而提高生產力發展,促進社會進步,優化產業結構等。因此,要想讓大數據更加充分地發揮其作用,我們必須要改變思維方式、管理方式,創造出與大數據技術相匹配的管理模式和運行模式。這或許是我們最難邁過的一道坎了。
筆者認為,大數據技術絕不僅僅只是海量數據的收集、整合、處理分析那么簡單,它是從紛繁復雜的龐大數據中挖掘出一切可利用的數據信息并處理為數字化資源,然后在進行整合處理,然后反過來增強信息便利,提升互聯網用戶體驗,從而實現客戶利益與體驗最大化的提升與進步。
由于中國人口多,所以在互聯網信息市場消費量也非常巨大,并且還在以很快的速度增加。而在人們生活水平提高、網絡信息化不斷發展的這些大背景下,大數據技術也必將在行業領域獲得廣泛應用,來作為提升信息消費體驗的重要手段。
所以,大數據在中國的發展前景應該是非常光明的。我國具有許多特殊的先天優勢,這是許多其他國家乃至發達國家所不具備的。我們的社會穩定高速的發展,各行各業市場潛力巨大,這些都給大數據帶來了十足的發展與運用空間。但與此同時,我們也必須加快大數據核心處理技術的突破與發展,這樣才能夠充分高效地利用我國龐大的數據資源,從而讓大數據帶給我們一個嶄新的時代!
[1]胡啟恒.2014:互聯網創世紀元年[J].北京:知識就是力量,2014(3).
[2]汪玉凱.中央網絡安全和信息化領導小組的由來及其影響[J].中國信息安全,2014(7).
[3]徐銳.從政府到企業的美國大數據戰略[J].信息化建設,2014(5).
[4]維克托,肯尼思著,盛楊燕,周濤譯.大數據時代:生活、工作與思維的大變革[M].浙江:浙江人民出版社,2014.
[5]涂子沛.大數據[M].廣西:廣西師范大學出版社,2013.
[6]艾伯特.爆發:大數據時代預見未來的新思維[M].北京:中國人民大學出版社,2012.
(責任編輯:孫嘉)