2012年12月20日10:08
2012年,“大數(shù)據(jù)”(Big Data)一詞席卷了IT業(yè)界。
顧名思義,大數(shù)據(jù)時代就是指有大量數(shù)據(jù)生成并利用這些數(shù)據(jù)的時代。
大數(shù)據(jù)成了IT提供商的一項重要課題(照片為NEC于11月舉行的iEXPO 2012展會的會場)。 |
IBM日本公司稱,全球每天生成的數(shù)據(jù)量達到2.5EB,而且其增長勢頭在不斷加快。
大家或許對EB這一單位不太熟悉,如果換算成家庭使用的普通藍光光盤,2.5EB相當(dāng)于10億張容量為25GB的藍光光盤。
而且令人吃驚的是,人類迄今為止生成的數(shù)據(jù)中,有90%是在近兩年內(nèi)產(chǎn)生的。
除了電子郵件、推特和Facebook中輸入的數(shù)據(jù)、用手機隨手拍攝的圖片,以及向YouTube投稿的視頻之外,還有各種傳感器收集的數(shù)據(jù),以及網(wǎng)上購物等的日志數(shù)據(jù)等,都被收集起來,F(xiàn)在,每秒鐘會產(chǎn)生1萬條微博等信息。
這些數(shù)據(jù)被稱為非結(jié)構(gòu)化數(shù)據(jù),在生成的數(shù)據(jù)中約占8成。非構(gòu)造化數(shù)據(jù)今后還將爆發(fā)性增加,估計在今后5年內(nèi)將增加800%。
另外還有人推算,到2020年,一年將生成35ZB的數(shù)據(jù),這一數(shù)據(jù)量相當(dāng)于目前的44倍。
在這樣的情況下,重要的一點是,目前的IT系統(tǒng)無法完全滿足大數(shù)據(jù)的要求。
針對IT系統(tǒng)的處理進行了優(yōu)化的數(shù)據(jù)被稱為結(jié)構(gòu)化數(shù)據(jù),其代表是Excel數(shù)據(jù)等。但大數(shù)據(jù)時代的IT系統(tǒng)必須能夠收集并分析微博及視頻等大量非結(jié)構(gòu)化數(shù)據(jù)。另外,將多種不同數(shù)據(jù)結(jié)合起來,催生新的發(fā)現(xiàn),這也是大數(shù)據(jù)時代要求IT系統(tǒng)具備的要素。
因此,業(yè)內(nèi)人士達成的共識是,大數(shù)據(jù)時代不僅指大量數(shù)據(jù)生成的時代,而且還指IT系統(tǒng)的機制本身被刷新的時代。
不過,大數(shù)據(jù)涉及的范疇不僅限于IT業(yè)界,因為其中還蘊涵著使我們的生活發(fā)生巨大變化的要素。
大數(shù)據(jù)消除交通堵塞
那么,大數(shù)據(jù)會以什么樣的形式影響我們的生活呢?其實,大數(shù)據(jù)會給我們帶來這樣的未來。
比如,通過收集并分析來自行駛于市內(nèi)的幾十萬輛汽車上的傳感器發(fā)出的大量數(shù)據(jù),便可實時掌握哪里發(fā)生了交通堵塞,并可根據(jù)這些信息向汽車發(fā)出指示,避開交通堵塞。
不過,只是這樣的話并沒多大意義。
如果這些信息中還包含市內(nèi)舉行的大型活動的信息,便可結(jié)合這些信息,根據(jù)活動開始及結(jié)束的時間來預(yù)測會場周圍的堵塞情況,然后根據(jù)事先預(yù)測做出繞道的指示。
另外,還可試著加入氣象信息、道路施工信息、公共交通信息及停車場信息等。這樣,在可能出現(xiàn)交通堵塞的道路上,便可靈活變更車道數(shù)量,或者鼓勵用戶將車輛停到最近的停車場,改乘公共交通工具前往目的地。
這時,還可結(jié)合一些其他的手段,比如對使用公共交通工具的人提供會場優(yōu)惠,而對駕車去會場的人收取一定的市區(qū)堵塞費等段。這樣便可進一步有效緩解交通堵塞。
而且,根據(jù)推特和Facebook等社交媒體上的信息可以了解到來自某一特定地區(qū)的數(shù)據(jù)輸入較為集中,由此便可得知那里發(fā)生了某些情況,然后根據(jù)這一信息向車輛發(fā)出繞道的指示。
現(xiàn)在海外已開始監(jiān)視社交媒體上的言論,當(dāng)有大量人群聚集場所產(chǎn)生大量負面言論時,就會判斷那里有發(fā)生游行或犯罪的預(yù)兆。在地圖上顯示這些信息后,當(dāng)附近的警力薄弱時,就會向其他地區(qū)的警察發(fā)出指示,讓他們前往這些有可能出現(xiàn)問題的地方,為現(xiàn)場補充警力,從而事先防范騷亂。
另外,還可與市內(nèi)的電力使用數(shù)據(jù)聯(lián)動,發(fā)行超市限時優(yōu)惠券促使窩在家中的人在下午用電高峰時段出門;還可鼓勵人們在用電低峰為電動汽車充滿電、在用電高峰在電動汽車中渡過,由此來削減家庭用電量。
僅從緩解交通堵塞的觀點來看,便可預(yù)見到這么大的變化。通過收集大量數(shù)據(jù)并把這些數(shù)據(jù)結(jié)合在一起進行分析,便可事先拿出多種對策,而且還可使社會本身變得豐富起來。而這也正是大數(shù)據(jù)的本質(zhì)所在。
里約熱內(nèi)盧在IBM協(xié)助下,組合氣象信息、檢修井水位信息及交通信息,在洪水到來時做禁止通信的預(yù)測。同時還在進行避開交通堵塞的研究。 |
進入2013年后,大數(shù)據(jù)的應(yīng)用案例估計會越來越多,這將為我們帶來意想不到的便利且豐富多彩的世界。作為具體的成果,2013年將會實現(xiàn)什么樣的新鮮事物,讓我們拭目以待。 (日經(jīng)技術(shù)在線! 供稿)