2012大數(shù)據(jù)：云計(jì)算之后的又一次泡沫？

云計(jì)算之后的又一次泡沫?

2012總結(jié)：大數(shù)據(jù)，有點(diǎn)像前幾年的云計(jì)算，被人們像概念一樣炒作。有關(guān)、無關(guān)或者沾一點(diǎn)邊的廠商都恨不得把它掛在嘴邊，當(dāng)然也有人可能是因?yàn)槔娴脑蛳朕k法來“詆毀”它。從狹義的角度來講，大數(shù)據(jù)的目的是為了在海量的結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)中挖掘商業(yè)價(jià)值。那么，相對(duì)出現(xiàn)更早的MPP數(shù)據(jù)倉(cāng)庫可以說是它的前身，而Hadoop作為更大規(guī)模分布式計(jì)算和存儲(chǔ)離線處理集群的代表，在今年更是紅透了半邊天。

2013展望：我們認(rèn)同2013年大數(shù)據(jù)方面的投資會(huì)有增加，但應(yīng)該不是在某一天就突然爆發(fā)，也不會(huì)一下就徹底改變?cè)瓉淼臉I(yè)務(wù)模式。用戶在聽廠商們“忽悠”的同時(shí)，也會(huì)冷靜下來思考自己的實(shí)際情況和可能帶來的價(jià)值。以達(dá)到一定規(guī)模的互聯(lián)網(wǎng)行業(yè)用戶為代表，基于Hadoop自行開發(fā);還有商業(yè)發(fā)行版這兩條路線仍將并存發(fā)展;而NoSQL等其它適合OLAP的工具也能從這個(gè)市場(chǎng)分得一杯羹。

存儲(chǔ)

嚴(yán)格的說，大數(shù)據(jù)更多相關(guān)的是軟件與服務(wù)方面，是傳統(tǒng)業(yè)務(wù)模式上的改變。那么，大數(shù)據(jù)對(duì)企業(yè)存儲(chǔ)的影響在哪些地方呢?一方面是管理數(shù)據(jù)復(fù)制的爆炸性增長(zhǎng)：通過減少對(duì)于無變化數(shù)據(jù)的備份和復(fù)制需要，良好的歸檔策略和對(duì)象存儲(chǔ)將有助于解決這一問題。 盡管最近專用磁盤備份設(shè)備的市場(chǎng)表現(xiàn)不太好，但這并意味著重復(fù)數(shù)據(jù)刪除技術(shù)的應(yīng)用有所減少。盡管惠普在完善他們的StoreOnce產(chǎn)品組合，賽門鐵克等也在轉(zhuǎn)型發(fā)展軟件+硬件的備份一體機(jī)，但嚴(yán)格說該領(lǐng)域還沒有哪家能給EMC帶來實(shí)質(zhì)上的競(jìng)爭(zhēng)，源端重復(fù)數(shù)據(jù)刪除應(yīng)用也沒有真正普及。

再有就是磁盤和磁帶存儲(chǔ)介質(zhì)容量的增長(zhǎng)。首先，單個(gè)企業(yè)級(jí)近線硬盤達(dá)到4TB，傳統(tǒng)RAID 5/6由于Rebuild時(shí)間過長(zhǎng)已經(jīng)有些不太適用。無論是擦除編碼還是分簇RAID，又指向了對(duì)象存儲(chǔ)或者帶有對(duì)象特征的文件系統(tǒng)。磁帶在容量?jī)r(jià)格比方面與磁盤已經(jīng)沒有什么優(yōu)勢(shì)，性能就不用說了，只剩下能耗和便于運(yùn)輸，LTFS的應(yīng)用能夠延長(zhǎng)其生命卻無法阻止它的下滑。

關(guān)鍵詞

重復(fù)數(shù)據(jù)刪除

重復(fù)數(shù)據(jù)刪除競(jìng)爭(zhēng)白熱化

中端存儲(chǔ)混戰(zhàn)

3PAR StoreServ 7000解析

x86、SSD緩存和虛擬化趨勢(shì)

閃存

IBM XIV SSD緩存揭秘

Fusion ION全閃存陣列DIY?

軟件定義存儲(chǔ)

VMware虛擬卷和閃存緩存

Mellanox VSA虛擬SAN

BenchMark軍備競(jìng)賽

SPC-1：閃存 vs.磁盤戰(zhàn)場(chǎng)

存儲(chǔ)Benchmark意義何在?

服務(wù)器/一體機(jī)

大數(shù)據(jù)作為未來IT發(fā)展的主力方向之一，在2012年得到了前所未有的發(fā)展和重視。而大數(shù)據(jù)作為數(shù)據(jù)的一種類型，終歸還是要依托于硬件進(jìn)行計(jì)算和處理的。而目前業(yè)界對(duì)于使用何種硬件來快速有效的處理大數(shù)據(jù)仍然沒有定論。在這種情況下，一體機(jī)、微服務(wù)器、內(nèi)存計(jì)算等類型的產(chǎn)品都可能在未來大數(shù)據(jù)的處理中占據(jù)一席之地。

一體機(jī)作為傳統(tǒng)服務(wù)器的擴(kuò)展和延伸，是目前大數(shù)據(jù)處理方面的主流選擇。通過將相關(guān)的計(jì)算、存儲(chǔ)和網(wǎng)絡(luò)設(shè)備無縫集合在一起，并且將功能做出單一的限定，一體機(jī)通常能夠在單一性能上爆發(fā)出強(qiáng)大的實(shí)力。但一體機(jī)也并非完美無缺，標(biāo)準(zhǔn)的相對(duì)混亂、高昂的價(jià)格以及差強(qiáng)人意的擴(kuò)展性和靈活性都是阻礙一體機(jī)進(jìn)一步發(fā)展和占領(lǐng)市場(chǎng)的最大障礙。

內(nèi)存計(jì)算同樣是目前業(yè)界處理海量數(shù)據(jù)比較認(rèn)可的方式之一。通過在普通服務(wù)器內(nèi)部安裝海量?jī)?nèi)存，服務(wù)器在IO方面的性能得到了質(zhì)的飛躍，通過相關(guān)軟件的配合，普通服務(wù)器也可以承擔(dān)大數(shù)據(jù)所帶來的巨大壓力。但內(nèi)存計(jì)算技術(shù)目前仍掌握在少數(shù)一兩家廠商的手中，而且標(biāo)準(zhǔn)和兼容性問題仍然令人堪憂。大數(shù)據(jù)究竟能否花落內(nèi)存計(jì)算，現(xiàn)在仍未可知。

微服務(wù)器可以說是未來服務(wù)器行業(yè)發(fā)展的潛力股。通過將海量的低功耗服務(wù)器集成在一個(gè)機(jī)箱內(nèi)，微服務(wù)器可以通過分布式計(jì)算來彌補(bǔ)單個(gè)處理器在性能上的不足。同時(shí)，低廉的價(jià)格、更低的功耗以及強(qiáng)大的擴(kuò)展能力都使其成為目前業(yè)界最炙手可熱的研發(fā)領(lǐng)域。但同時(shí)，我們也要澄清，微服務(wù)器目前無論從產(chǎn)品成熟度還是相關(guān)軟件和算法的豐富程度來看都還不具備普及的條件，因此，微服務(wù)器想要挑起大數(shù)據(jù)的擔(dān)子仍需時(shí)日。

關(guān)鍵詞

Oracle一體機(jī)

浪潮一體機(jī)

IBM一體機(jī)

微服務(wù)器

內(nèi)存計(jì)算

軟件

大數(shù)據(jù)是2012年最熱的詞匯之一，隨著社交網(wǎng)絡(luò)的逐漸成熟，移動(dòng)帶寬迅速提升，云計(jì)算、物聯(lián)網(wǎng)應(yīng)用更加豐富。更多的傳感設(shè)備、移動(dòng)終端接入到網(wǎng)絡(luò)，由此產(chǎn)生的數(shù)據(jù)及增長(zhǎng)速度將比歷史上的任何時(shí)期都要多，都要快，"大數(shù)據(jù)"時(shí)代不容忽視，未來將是"大數(shù)據(jù)"引領(lǐng)的智慧科技的時(shí)代,也對(duì)眾多行業(yè)企業(yè)和IT公司帶來前所未有的挑戰(zhàn)和機(jī)遇，大數(shù)據(jù)時(shí)代將促使企業(yè)的基礎(chǔ)IT架構(gòu)、數(shù)據(jù)處理、應(yīng)用軟件的開發(fā)和管理模式等領(lǐng)域產(chǎn)生新的變革。

在2012年IBM IOD大會(huì)中明確了大數(shù)據(jù)平臺(tái)架構(gòu)。架構(gòu)分為四個(gè)部分，最底層是大數(shù)據(jù)的基礎(chǔ)架構(gòu)，其上是大數(shù)據(jù)平臺(tái)，然后是信息的分析和管理軟件，最后是各個(gè)行業(yè)的解決方案，包括金融、電信、政府等行業(yè)。作為IT行業(yè)的領(lǐng)頭人，IBM為大數(shù)據(jù)時(shí)代的道路鋪平墊穩(wěn)，軟件領(lǐng)域多數(shù)軟件商也都到了大數(shù)據(jù)的必然性，結(jié)合自身產(chǎn)品特點(diǎn)迎合大數(shù)據(jù)的趨勢(shì)，在2013想必大數(shù)據(jù)熱鬧拼起，為之期待。

關(guān)鍵詞

平臺(tái)

架構(gòu)

管理模式

數(shù)據(jù)處理

網(wǎng)絡(luò)

根據(jù)思科的相關(guān)報(bào)告指出，未來五年內(nèi)數(shù)據(jù)中心內(nèi)部的流量仍將占主導(dǎo)地位。絕大部分?jǐn)?shù)據(jù)中心流量并非由最終用戶生成，而是由數(shù)據(jù)中心和云計(jì)算工作負(fù)載產(chǎn)生。個(gè)人用戶通常不會(huì)察覺到使用這些工作負(fù)載的活動(dòng)。從2011年到2016年間，思科預(yù)測(cè)約有76%的數(shù)據(jù)中心流量將位于數(shù)據(jù)中心內(nèi)，并主要由存儲(chǔ)、生產(chǎn)和開發(fā)數(shù)據(jù)產(chǎn)生。另有7%的數(shù)據(jù)中心流量將在數(shù)據(jù)中心之間產(chǎn)生，主要由數(shù)據(jù)復(fù)制和軟件/系統(tǒng)更新等活動(dòng)生成。剩余17%的數(shù)據(jù)中心流量將由最終用戶在訪問云來瀏覽網(wǎng)頁、收發(fā)電子郵件和觀看視頻流的過程中產(chǎn)生。

而如何去快速處理數(shù)據(jù)中心內(nèi)部的流量，仍將是企業(yè)最為關(guān)心的話題。隨著數(shù)據(jù)中心進(jìn)一步實(shí)施各種抽象層技術(shù)，很多的企業(yè)都選擇重新考慮如何設(shè)計(jì)他們的數(shù)據(jù)中心并遷移到扁平化的簡(jiǎn)單網(wǎng)絡(luò)中，這種網(wǎng)絡(luò)相比過去而言能夠支持更多不同的流量模式。

關(guān)鍵詞

SDN

融合網(wǎng)絡(luò)

一體化網(wǎng)絡(luò)

大二層

扁平化

安全

過去，談到數(shù)據(jù)安全，通常采購(gòu)一個(gè)防火墻就能基本實(shí)現(xiàn)。2012年我們看到，大數(shù)據(jù)已經(jīng)廣泛應(yīng)用于各個(gè)行業(yè)，隨著大數(shù)據(jù)的深入應(yīng)用，數(shù)據(jù)安全準(zhǔn)則也將隨之發(fā)生改變?！按髷?shù)據(jù)”是虛擬技術(shù)、云計(jì)算和數(shù)據(jù)中心三者使用率增加后的邏輯衍生物，雖然它是一個(gè)可有效使用數(shù)據(jù)的平臺(tái)，但也存在嚴(yán)重的安全和合規(guī)性問題，包括：大量的敏感數(shù)據(jù)分布在大量節(jié)點(diǎn)上;很少控件和審查機(jī)制;目前的工具和數(shù)據(jù)存取方法較為粗糙與粗暴。對(duì)企業(yè)而言，安全隱患是部署的重要障礙，而在過去10年，數(shù)據(jù)庫活動(dòng)監(jiān)測(cè)技術(shù)實(shí)際解決的也是安全方面的隱患。將所有的數(shù)據(jù)都存儲(chǔ)在同一個(gè)地方，固然會(huì)使得保護(hù)數(shù)據(jù)變得更簡(jiǎn)單，但這也方便了黑客，使其目標(biāo)變得更有誘惑力。

2012年，我們已逐步進(jìn)入大數(shù)據(jù)時(shí)代，數(shù)據(jù)量非線性增長(zhǎng)，而絕大多數(shù)企業(yè)都沒有專門的工具或流程來應(yīng)對(duì)這種非線性增長(zhǎng)。數(shù)據(jù)量的不斷增長(zhǎng)，也讓傳統(tǒng)安全工具已經(jīng)不再像以前那么有效。大數(shù)據(jù)應(yīng)用帶來了新的安全需求，一些廠商已經(jīng)開始意識(shí)到由此帶來的發(fā)展機(jī)遇。如，IBM Guardium將其在數(shù)據(jù)庫安全領(lǐng)域的優(yōu)勢(shì)進(jìn)一步延伸，率先為用戶提供了針對(duì)大數(shù)據(jù)的安全保護(hù)方案。

關(guān)鍵詞

數(shù)據(jù)庫安全

云數(shù)據(jù)中心

非結(jié)構(gòu)化數(shù)據(jù)

敏感數(shù)據(jù)

來源：比特網(wǎng)

　　版權(quán)及免責(zé)聲明：凡本網(wǎng)所屬版權(quán)作品，轉(zhuǎn)載時(shí)須獲得授權(quán)并注明來源“中國(guó)產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)”，違者本網(wǎng)將保留追究其相關(guān)法律責(zé)任的權(quán)力。凡轉(zhuǎn)載文章，不代表本網(wǎng)觀點(diǎn)和立場(chǎng)。版權(quán)事宜請(qǐng)聯(lián)系：010-65363056。

延伸閱讀