大數(shù)據(jù)時(shí)代的有色大數(shù)據(jù)

　　最早提出大數(shù)據(jù)時(shí)代到來(lái)的是全球知名咨詢(xún)公司麥肯錫。麥肯錫稱(chēng)，數(shù)據(jù)，已經(jīng)滲透到當(dāng)今每一個(gè)行業(yè)和業(yè)務(wù)職能領(lǐng)域，成為重要的生產(chǎn)因素。人們對(duì)于海量數(shù)據(jù)的挖掘和運(yùn)用，預(yù)示著新一波生產(chǎn)率增長(zhǎng)和消費(fèi)者盈余浪潮的到來(lái)。大數(shù)據(jù)在物理學(xué)、生物學(xué)、環(huán)境生態(tài)學(xué)等領(lǐng)域以及軍事、金融、通訊等行業(yè)存在已有時(shí)日，卻因?yàn)榻陙?lái)互聯(lián)網(wǎng)和信息行業(yè)的發(fā)展而引起人們關(guān)注。大數(shù)據(jù)已成為云計(jì)算、物聯(lián)網(wǎng)之后IT行業(yè)又一大顛覆性的技術(shù)革命。

　　傳統(tǒng)的統(tǒng)計(jì)數(shù)據(jù)往往是通過(guò)數(shù)字來(lái)表達(dá)的，而在大數(shù)據(jù)時(shí)代，我們面臨更多的是非結(jié)構(gòu)化的數(shù)據(jù)，比如圖像、文本、日志，還有比如百度的搜索數(shù)據(jù)（百度訪問(wèn)的網(wǎng)頁(yè)有幾千億個(gè)，每天處理的數(shù)據(jù)量是100個(gè)PB，這也是大數(shù)據(jù)時(shí)代一個(gè)數(shù)量級(jí)的象征）。這些數(shù)據(jù)都從微觀層面反映了社會(huì)經(jīng)濟(jì)、人們?nèi)粘Ｉ钚袨榈姆椒矫婷?。如果我們能夠把現(xiàn)有的這些數(shù)據(jù)都收集起來(lái)進(jìn)行深入的分析和挖掘，就會(huì)發(fā)現(xiàn)這些數(shù)據(jù)當(dāng)中隱藏的更深刻的規(guī)律和現(xiàn)象，就能更好地服務(wù)于政府決策和社會(huì)各方面的需求，大數(shù)據(jù)的真正價(jià)值就體現(xiàn)在這里。

　　如今，數(shù)據(jù)科學(xué)與商業(yè)智能正在發(fā)生深刻變化，不僅僅是技術(shù)和能力上。隨著大數(shù)據(jù)應(yīng)用的爆發(fā)性增長(zhǎng)，它已經(jīng)衍生出了自己獨(dú)特的架構(gòu)，而且也直接推動(dòng)了存儲(chǔ)、網(wǎng)絡(luò)以及計(jì)算技術(shù)的發(fā)展。給大家印象比較深的是今年1月，央視晚間新聞推出“據(jù)說(shuō)春運(yùn)”特別節(jié)目，首次采用百度地圖LBS定位的可視化大數(shù)據(jù)播報(bào)國(guó)內(nèi)春節(jié)人口遷徙情況。在業(yè)界看來(lái)，這正是大數(shù)據(jù)首次以普通消費(fèi)者能看懂的方式被展現(xiàn)在電視屏幕上?？梢哉f(shuō)，大數(shù)據(jù)時(shí)代正向我們走來(lái)。

　　從宏觀政策來(lái)看，大數(shù)據(jù)是具有國(guó)家戰(zhàn)略意義的新興產(chǎn)業(yè)。《“十二五”國(guó)家戰(zhàn)略性新興產(chǎn)業(yè)發(fā)展規(guī)劃》中提出支持海量數(shù)據(jù)存儲(chǔ)、處理技術(shù)研發(fā)與產(chǎn)業(yè)化。

　　而發(fā)掘數(shù)據(jù)價(jià)值、征服數(shù)據(jù)“海洋”的動(dòng)力就是云計(jì)算?；ヂ?lián)網(wǎng)時(shí)代，尤其是社交網(wǎng)絡(luò)、電子商務(wù)與移動(dòng)通信把人類(lèi)社會(huì)帶入了一個(gè)以“PB”（1024TB）為單位的結(jié)構(gòu)與非結(jié)構(gòu)數(shù)據(jù)信息的新時(shí)代。在云計(jì)算出現(xiàn)之前，傳統(tǒng)的計(jì)算機(jī)是無(wú)法處理如此量大、并且不規(guī)則的“非結(jié)構(gòu)數(shù)據(jù)”的。以云計(jì)算為基礎(chǔ)的信息存儲(chǔ)、分享和挖掘手段，可以低價(jià)、有效地將這些大量、高速、多變化的終端數(shù)據(jù)存儲(chǔ)下來(lái)，并隨時(shí)進(jìn)行分析與計(jì)算。通過(guò)云計(jì)算對(duì)大數(shù)據(jù)進(jìn)行分析、預(yù)測(cè)，會(huì)使得決策更為精準(zhǔn)，釋放出更多數(shù)據(jù)的隱藏價(jià)值，從而獲得更多有價(jià)值的信息。以購(gòu)買(mǎi)飛機(jī)票為例，目前我們主要是通過(guò)增加提前預(yù)定的時(shí)間才能享受到較高的機(jī)票折扣，但是現(xiàn)實(shí)往往不是這樣，有時(shí)會(huì)在出發(fā)前一天購(gòu)買(mǎi)到更低折扣的機(jī)票，原因可能是眾多機(jī)票代售公司在飛機(jī)起飛前一天仍然有未售出的座位，為了減少損失不得不以更低的折扣售出，所以會(huì)造成之前享受的折扣沒(méi)有比臨起飛前低的情況，這就造成提前購(gòu)票折扣低的規(guī)律往往起不了作用。但如果引進(jìn)了數(shù)據(jù)分析，確實(shí)有規(guī)律可循。首先建立一個(gè)數(shù)據(jù)預(yù)測(cè)系統(tǒng)，這個(gè)預(yù)測(cè)系統(tǒng)將建立預(yù)售前一段時(shí)間（比如30天）內(nèi)價(jià)格波動(dòng)樣本。價(jià)格波動(dòng)，機(jī)票降價(jià)會(huì)因?yàn)楹芏鄾](méi)賣(mài)掉的座位、季節(jié)性原因、不同航空公司、早晚差別、周六晚上不出門(mén)等因素來(lái)預(yù)測(cè)未來(lái)機(jī)票價(jià)格的走勢(shì)，通過(guò)一個(gè)數(shù)據(jù)庫(kù)，系統(tǒng)進(jìn)行預(yù)測(cè)時(shí)，預(yù)測(cè)的結(jié)果由每一條航線(xiàn)上每一架飛機(jī)內(nèi)的每一個(gè)座位一年內(nèi)的綜合票價(jià)紀(jì)錄而得出。最后通過(guò)可能多達(dá)幾千億條飛行數(shù)據(jù)記錄，預(yù)測(cè)出你所需要的航班最低票價(jià)。

　　有色金屬是國(guó)民經(jīng)濟(jì)發(fā)展的基礎(chǔ)材料，航空、航天、汽車(chē)、機(jī)械制造、電力、通訊、建筑、家電等絕大部分行業(yè)都以有色金屬材料為生產(chǎn)基礎(chǔ)。有色金屬工業(yè)是國(guó)家的重要產(chǎn)業(yè)部門(mén)，是國(guó)民經(jīng)濟(jì)建設(shè)的重要支柱。隨著高新技術(shù)發(fā)展，對(duì)有色金屬的產(chǎn)品結(jié)構(gòu)、產(chǎn)品質(zhì)量和數(shù)量提出了越來(lái)越高的要求，未來(lái)有色金屬行業(yè)的競(jìng)爭(zhēng)將非常激烈，只有那些能不斷提升核心競(jìng)爭(zhēng)力與價(jià)值的企業(yè)才能最終生存下來(lái)，并獲得豐厚的利潤(rùn)，而信息化、數(shù)據(jù)庫(kù)的建立和應(yīng)用在未來(lái)企業(yè)獲得核心競(jìng)爭(zhēng)力上將發(fā)揮至關(guān)重要的作用。

　　2013年，我國(guó)9276家規(guī)模以上有色金屬工業(yè)企業(yè)（含黃金、稀土）實(shí)現(xiàn)主營(yíng)業(yè)務(wù)收入52695億元；2014年1~6月，全國(guó)十種有色金屬產(chǎn)量累計(jì)達(dá)2089萬(wàn)噸。銅、鋁、鉛鋅、鈦、黃金、鎳、鎢、錫、稀土金屬、白銀、鉬、鎵、銻等幾十種有色金屬產(chǎn)品產(chǎn)量數(shù)據(jù)分析、進(jìn)出口貿(mào)易分析、區(qū)域發(fā)展分析、重點(diǎn)企業(yè)運(yùn)營(yíng)狀況分析、產(chǎn)業(yè)政策環(huán)境分析以及有色金屬股票、期貨指數(shù)預(yù)測(cè)等無(wú)不是與各種數(shù)據(jù)緊緊相連。有色金屬行業(yè)必將成為近十年大數(shù)據(jù)應(yīng)用的重要戰(zhàn)場(chǎng)。

　　如何建設(shè)和成就有色大數(shù)據(jù)，一是要充分利用現(xiàn)代化信息手段，特別是計(jì)算機(jī)和網(wǎng)絡(luò)技術(shù)的應(yīng)用。注重?cái)?shù)據(jù)的采集過(guò)濾、分類(lèi)分析，奠定大數(shù)據(jù)基礎(chǔ)工作；二是方法手段的更新。有色行業(yè)的信息化，不可能一步到位，而是采用最新的計(jì)算機(jī)和網(wǎng)絡(luò)技術(shù)手段逐步建立起數(shù)據(jù)庫(kù)體系。先從一個(gè)金屬品種開(kāi)始，建立一個(gè)金屬品種的信息網(wǎng)和這個(gè)小行業(yè)的信息數(shù)據(jù)庫(kù)，比如可先從電解鋁開(kāi)始，探索經(jīng)驗(yàn)，然后逐步建立銅、鉛、鋅、鎳、錫、銻等其他金屬品種的行業(yè)信息網(wǎng)和行業(yè)數(shù)據(jù)庫(kù)，然后再把分品種的信息網(wǎng)和數(shù)據(jù)連接在一起形成有色行業(yè)的信息網(wǎng)和數(shù)據(jù)庫(kù)；三是建立有色大數(shù)據(jù)中心，就像百度在山西陽(yáng)泉建立百度云計(jì)算中心，中國(guó)電信、中國(guó)移動(dòng)、中國(guó)聯(lián)通在貴陽(yáng)建立數(shù)據(jù)中心一樣，有色金屬行業(yè)根據(jù)實(shí)際適時(shí)適地建立大數(shù)據(jù)中心。通過(guò)數(shù)據(jù)中心對(duì)各種海量的所需數(shù)據(jù)的整合、篩選、分析、組合，最后形成終端用戶(hù)所需的數(shù)據(jù)資源。

來(lái)源：中國(guó)有色金屬報(bào)

　　版權(quán)及免責(zé)聲明：凡本網(wǎng)所屬版權(quán)作品，轉(zhuǎn)載時(shí)須獲得授權(quán)并注明來(lái)源“中國(guó)產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)”，違者本網(wǎng)將保留追究其相關(guān)法律責(zé)任的權(quán)力。凡轉(zhuǎn)載文章，不代表本網(wǎng)觀點(diǎn)和立場(chǎng)。版權(quán)事宜請(qǐng)聯(lián)系：010-65363056。

延伸閱讀