大數(shù)據(jù)時代的有色大數(shù)據(jù)
2014年07月21日 14:40 9307次瀏覽 來源: 中國有色金屬報 分類: 重點新聞
最早提出大數(shù)據(jù)時代到來的是全球知名咨詢公司麥肯錫。麥肯錫稱,數(shù)據(jù),已經(jīng)滲透到當今每一個行業(yè)和業(yè)務(wù)職能領(lǐng)域,成為重要的生產(chǎn)因素。人們對于海量數(shù)據(jù)的挖掘和運用,預(yù)示著新一波生產(chǎn)率增長和消費者盈余浪潮的到來。大數(shù)據(jù)在物理學(xué)、生物學(xué)、環(huán)境生態(tài)學(xué)等領(lǐng)域以及軍事、金融、通訊等行業(yè)存在已有時日,卻因為近年來互聯(lián)網(wǎng)和信息行業(yè)的發(fā)展而引起人們關(guān)注。大數(shù)據(jù)已成為云計算、物聯(lián)網(wǎng)之后IT行業(yè)又一大顛覆性的技術(shù)革命。
傳統(tǒng)的統(tǒng)計數(shù)據(jù)往往是通過數(shù)字來表達的,而在大數(shù)據(jù)時代,我們面臨更多的是非結(jié)構(gòu)化的數(shù)據(jù),比如圖像、文本、日志,還有比如百度的搜索數(shù)據(jù)(百度訪問的網(wǎng)頁有幾千億個,每天處理的數(shù)據(jù)量是100個PB,這也是大數(shù)據(jù)時代一個數(shù)量級的象征)。這些數(shù)據(jù)都從微觀層面反映了社會經(jīng)濟、人們?nèi)粘I钚袨榈姆椒矫婷?。如果我們能夠把現(xiàn)有的這些數(shù)據(jù)都收集起來進行深入的分析和挖掘,就會發(fā)現(xiàn)這些數(shù)據(jù)當中隱藏的更深刻的規(guī)律和現(xiàn)象,就能更好地服務(wù)于政府決策和社會各方面的需求,大數(shù)據(jù)的真正價值就體現(xiàn)在這里。
如今,數(shù)據(jù)科學(xué)與商業(yè)智能正在發(fā)生深刻變化,不僅僅是技術(shù)和能力上。隨著大數(shù)據(jù)應(yīng)用的爆發(fā)性增長,它已經(jīng)衍生出了自己獨特的架構(gòu),而且也直接推動了存儲、網(wǎng)絡(luò)以及計算技術(shù)的發(fā)展。給大家印象比較深的是今年1月,央視晚間新聞推出“據(jù)說春運”特別節(jié)目,首次采用百度地圖LBS定位的可視化大數(shù)據(jù)播報國內(nèi)春節(jié)人口遷徙情況。在業(yè)界看來,這正是大數(shù)據(jù)首次以普通消費者能看懂的方式被展現(xiàn)在電視屏幕上??梢哉f,大數(shù)據(jù)時代正向我們走來。
從宏觀政策來看,大數(shù)據(jù)是具有國家戰(zhàn)略意義的新興產(chǎn)業(yè)?!?ldquo;十二五”國家戰(zhàn)略性新興產(chǎn)業(yè)發(fā)展規(guī)劃》中提出支持海量數(shù)據(jù)存儲、處理技術(shù)研發(fā)與產(chǎn)業(yè)化。
而發(fā)掘數(shù)據(jù)價值、征服數(shù)據(jù)“海洋”的動力就是云計算。互聯(lián)網(wǎng)時代,尤其是社交網(wǎng)絡(luò)、電子商務(wù)與移動通信把人類社會帶入了一個以“PB”(1024TB)為單位的結(jié)構(gòu)與非結(jié)構(gòu)數(shù)據(jù)信息的新時代。在云計算出現(xiàn)之前,傳統(tǒng)的計算機是無法處理如此量大、并且不規(guī)則的“非結(jié)構(gòu)數(shù)據(jù)”的。以云計算為基礎(chǔ)的信息存儲、分享和挖掘手段,可以低價、有效地將這些大量、高速、多變化的終端數(shù)據(jù)存儲下來,并隨時進行分析與計算。通過云計算對大數(shù)據(jù)進行分析、預(yù)測,會使得決策更為精準,釋放出更多數(shù)據(jù)的隱藏價值,從而獲得更多有價值的信息。以購買飛機票為例,目前我們主要是通過增加提前預(yù)定的時間才能享受到較高的機票折扣,但是現(xiàn)實往往不是這樣,有時會在出發(fā)前一天購買到更低折扣的機票,原因可能是眾多機票代售公司在飛機起飛前一天仍然有未售出的座位,為了減少損失不得不以更低的折扣售出,所以會造成之前享受的折扣沒有比臨起飛前低的情況,這就造成提前購票折扣低的規(guī)律往往起不了作用。但如果引進了數(shù)據(jù)分析,確實有規(guī)律可循。首先建立一個數(shù)據(jù)預(yù)測系統(tǒng),這個預(yù)測系統(tǒng)將建立預(yù)售前一段時間(比如30天)內(nèi)價格波動樣本。價格波動,機票降價會因為很多沒賣掉的座位、季節(jié)性原因、不同航空公司、早晚差別、周六晚上不出門等因素來預(yù)測未來機票價格的走勢,通過一個數(shù)據(jù)庫,系統(tǒng)進行預(yù)測時,預(yù)測的結(jié)果由每一條航線上每一架飛機內(nèi)的每一個座位一年內(nèi)的綜合票價紀錄而得出。最后通過可能多達幾千億條飛行數(shù)據(jù)記錄,預(yù)測出你所需要的航班最低票價。
責任編輯:彭彭
如需了解更多信息,請登錄中國有色網(wǎng):www.luytgc.com了解更多信息。
中國有色網(wǎng)聲明:本網(wǎng)所有內(nèi)容的版權(quán)均屬于作者或頁面內(nèi)聲明的版權(quán)人。
凡注明文章來源為“中國有色金屬報”或 “中國有色網(wǎng)”的文章,均為中國有色網(wǎng)原創(chuàng)或者是合作機構(gòu)授權(quán)同意發(fā)布的文章。
如需轉(zhuǎn)載,轉(zhuǎn)載方必須與中國有色網(wǎng)( 郵件:cnmn@cnmn.com.cn 或 電話:010-63971479)聯(lián)系,簽署授權(quán)協(xié)議,取得轉(zhuǎn)載授權(quán);
凡本網(wǎng)注明“來源:“XXX(非中國有色網(wǎng)或非中國有色金屬報)”的文章,均轉(zhuǎn)載自其它媒體,轉(zhuǎn)載目的在于傳遞更多信息,并不構(gòu)成投資建議,僅供讀者參考。
若據(jù)本文章操作,所有后果讀者自負,中國有色網(wǎng)概不負任何責任。