這個(gè)世界變化太快,數(shù)據(jù)爆炸式增長(zhǎng)帶給存儲(chǔ)廠商新的發(fā)展,在這個(gè)環(huán)境下,是什么東西給予了大數(shù)據(jù)生命?相信大數(shù)據(jù)也有它自己的運(yùn)作機(jī)理,科技廠商、政府、學(xué)者、媒體都在推動(dòng)大數(shù)據(jù)走向成熟,我們需要做的就是應(yīng)該按照大數(shù)據(jù)的發(fā)展需求順應(yīng)形勢(shì),適時(shí)制定自己的發(fā)展策略。如此以來(lái)大數(shù)據(jù)的運(yùn)作才能更健康,也能更快的走向成熟。
如果社會(huì)是不發(fā)展的,自然就沒(méi)有生機(jī)可言,正是因?yàn)槠髽I(yè)擁有的信息量不斷增大,企業(yè)面臨的形勢(shì)也時(shí)刻在變化,這促成了大數(shù)據(jù)時(shí)代的形成。所以變化應(yīng)該是大數(shù)據(jù)生命力的來(lái)源,即為大數(shù)據(jù)的靈魂。
2012的市場(chǎng)尤其適合用變化這一關(guān)鍵詞來(lái)形容。市場(chǎng)需求和廠商策略兩大市場(chǎng)變量可謂是風(fēng)隨火起,火借風(fēng)勢(shì)。不管是IBM、EMC等存儲(chǔ)巨頭,即是小的存儲(chǔ)廠商也越來(lái)越注重市場(chǎng)需求的變化。所以可以看到的是今年很多存儲(chǔ)廠商策略涉及的關(guān)鍵詞都是統(tǒng)一存儲(chǔ)、一體機(jī)、固態(tài)存儲(chǔ)、融合等等。
大數(shù)據(jù)的火熱也為一批新的產(chǎn)品和技術(shù)提供了更廣闊的施展空間,這其中,數(shù)據(jù)庫(kù)一體機(jī)和分布式計(jì)算系統(tǒng)Hadoop就是最明顯的代表,因?yàn)閷⒂?jì)算、存儲(chǔ)硬件以及應(yīng)用軟件進(jìn)行集成,在簡(jiǎn)化部署的同時(shí)降低應(yīng)用和管理難度,一體化集成系統(tǒng)已經(jīng)成為了各大IT供應(yīng)商搶占的新高地,主流廠商相繼推出面向數(shù)據(jù)庫(kù)應(yīng)用的一體機(jī),包括Oracle三大數(shù)據(jù)處理集成系統(tǒng)、惠普AppSystem for Hadoop以及IBM的PureData System,而這些集成系統(tǒng)都選擇了共同的平臺(tái)——英特爾x86架構(gòu)。
主流的大數(shù)據(jù)處理集成系統(tǒng)中,英特爾x86架構(gòu)正在成為一種新的標(biāo)準(zhǔn)平臺(tái),英特爾至強(qiáng)處理器這一堅(jiān)實(shí)基石也使眾多的軟硬集成解決方案如虎添翼,并得以彰顯最大的威力。另一方面,除了已經(jīng)成為傳統(tǒng)計(jì)算領(lǐng)域中的開(kāi)放標(biāo)準(zhǔn),英特爾也正在大數(shù)據(jù)這股新浪潮中打造一個(gè)新的標(biāo)準(zhǔn)化硬件生態(tài)系統(tǒng)。
數(shù)據(jù)本來(lái)沒(méi)有什么價(jià)值,但是通過(guò)特定的算法對(duì)海量的數(shù)據(jù)進(jìn)行挖掘和分析之后,客戶的需求和市場(chǎng)的發(fā)展趨勢(shì)便會(huì)明晰起來(lái)。數(shù)據(jù)挖掘和數(shù)據(jù)分析是從數(shù)據(jù)變?yōu)橛袃r(jià)值的信息最終影響決策者決策的途中的關(guān)鍵一環(huán)。
數(shù)據(jù)分析對(duì)互聯(lián)網(wǎng)的改變是巨大的,只是這些改變存在于細(xì)節(jié)之間。例如hao123,數(shù)年之前hao123還只是一個(gè)將各類網(wǎng)站匯總的一個(gè)頁(yè)面而已,現(xiàn)在雖然 匯總各類網(wǎng)站仍是其重要的功能,但是現(xiàn)在hao123能呈現(xiàn)實(shí)時(shí)新聞、當(dāng)下熱門的小游戲等信息,能將當(dāng)下最受矚目的信息呈現(xiàn)出來(lái),這就是數(shù)據(jù)分析的作用。當(dāng)然hao123只是數(shù)據(jù)分析的一個(gè)縮影,很多業(yè)界人士預(yù)言將來(lái)用戶的一次對(duì)汽車信息的搜索可能會(huì)在下次到超市的時(shí)候接收到很多有關(guān)汽車用品的推銷信息。
物聯(lián)網(wǎng):這是一個(gè)非常重要的數(shù)據(jù)來(lái)源,大量的傳感器給上層決策者提供了第一手的信息。這一層是大數(shù)據(jù)與自然界接觸的第一層,在大數(shù)據(jù)時(shí)代,物聯(lián)網(wǎng)實(shí) 為大數(shù)據(jù)的五官,為其感知外部世界。 社交網(wǎng)絡(luò)給企業(yè)提供了一個(gè)發(fā)現(xiàn)客戶需求的一個(gè)新的途徑,越來(lái)越多的人開(kāi)始重視以Facebook為首的社交網(wǎng)絡(luò)上人們發(fā)布的狀態(tài)給他們帶來(lái)的信息。 完整Hadoop的技術(shù)堆棧包括常用設(shè)施、分布式文件系統(tǒng)、分析和數(shù)據(jù)存儲(chǔ)平臺(tái),以及管理分布式處理、并行計(jì)算、工作流程和配置管理的應(yīng)用層。
今年的Hadoop跟隨大數(shù)據(jù)的熱潮也熱了一把,特別是英特爾發(fā)布了Hadoop發(fā)行版。其中包含Hadoop分布式文件系統(tǒng)HDFS、分布式數(shù)據(jù)庫(kù)HBase、分布式計(jì)算框架 MapReduce、數(shù)據(jù)倉(cāng)庫(kù)Hive、數(shù)據(jù)處理Pig、機(jī)器學(xué)習(xí)Mahout商業(yè)套件。筆者參加的幾個(gè)大數(shù)據(jù)相關(guān)的大型論壇也也都是將Hadoop和大數(shù)據(jù)結(jié)合進(jìn)行討論的。
時(shí)間長(zhǎng)了,企業(yè)運(yùn)維難免出現(xiàn)意外,備份一直以來(lái)是企業(yè)應(yīng)對(duì)數(shù)據(jù)丟失、服務(wù)器宕機(jī)等問(wèn)題的主要手段。數(shù)據(jù)的暴增、宕機(jī)、設(shè)備性能無(wú)法趕上需求步伐等問(wèn) 題困擾著每位決策者。一次服務(wù)器的意外宕機(jī)可能使公司停止數(shù)小時(shí)運(yùn)作或是丟失大量客戶資料。應(yīng)該說(shuō)災(zāi)難的不可避免催生了備份市場(chǎng)的繁榮。
今 年的災(zāi)備市場(chǎng)應(yīng)該給以改革和發(fā)展兩個(gè)關(guān)鍵詞,改革是備份廠商紛紛調(diào)整策略適應(yīng)新的市場(chǎng)需求,賽門鐵克推出備份一體機(jī)、CommVault推出“147”數(shù) 據(jù)管理解決方案應(yīng)該都是數(shù)據(jù)保護(hù)里面非常具有代表性的事件。而發(fā)展則是國(guó)內(nèi)備份市場(chǎng)的發(fā)展,愛(ài)數(shù)、和力記易、火星高科等備份廠商都積極應(yīng)對(duì)當(dāng)前的市場(chǎng)需 求,國(guó)產(chǎn)備份在今年討論的非常多。
從單個(gè)的PC到數(shù)據(jù)中心再到Internet,網(wǎng)絡(luò)思想可謂無(wú)處不在,大數(shù)據(jù)時(shí)代單個(gè)的節(jié)點(diǎn)上已經(jīng)很難應(yīng)對(duì)企業(yè)的需求,網(wǎng)絡(luò)存儲(chǔ)應(yīng)該是存儲(chǔ)應(yīng)對(duì)大數(shù)據(jù)絕佳策略。而各種適配卡則是網(wǎng)絡(luò)中不同設(shè)備或是組件之間協(xié)調(diào)的交點(diǎn)。適配卡使得存儲(chǔ)網(wǎng)絡(luò)更具擴(kuò)展性和靈活性。
隨著Emulex 16G FC光纖通道HBA卡的推廣,適配卡市場(chǎng)朝著更快的速度、更穩(wěn)定的性能、更豐富的產(chǎn)品以及更高的虛擬化幾個(gè)方向發(fā)展。Adaptec by PMC 7系列、LSI Syncro都稱得上適配器市場(chǎng)上的亮點(diǎn)。適配器作為對(duì)設(shè)備性能的擴(kuò)展和提升工具正朝著更快、更穩(wěn)、更多樣化的方向發(fā)展。
高端存儲(chǔ)和低端存儲(chǔ)猶似雙腳將大數(shù)據(jù)與企業(yè)實(shí)際情況對(duì)接,畢竟對(duì)于企業(yè)而言,大數(shù)據(jù)未免過(guò)于空泛。具體的系統(tǒng)構(gòu)建策略還是應(yīng)該有具體的解決方案支持的。所以當(dāng)前眾多廠商均針對(duì)不同層級(jí)客戶劃分高中低三條產(chǎn)品線以適應(yīng)企業(yè)的具體需求。
由于中小企業(yè)的數(shù)量劇增,國(guó)內(nèi)SMB存儲(chǔ)市場(chǎng)今年尤為火熱。EMC、惠普、NetApp、Dell都非常重視SMB市場(chǎng)的發(fā)展,IBM的V3500和V3700的發(fā)布更是中低端存儲(chǔ)市場(chǎng)上不可不提的產(chǎn)品。中高低三個(gè)存儲(chǔ)市場(chǎng)對(duì)存儲(chǔ)系統(tǒng)有著各異的需求,針對(duì)不同的企業(yè)規(guī)模發(fā)展不同的產(chǎn)品線無(wú)疑是使自己的發(fā)展理念落地的絕佳策略。
數(shù)據(jù)應(yīng)該是大數(shù)據(jù)的基本組成單元,所以應(yīng)該說(shuō)數(shù)據(jù)是大數(shù)據(jù)生命體的血肉,不管是數(shù)據(jù)中心還是存儲(chǔ)網(wǎng)絡(luò)以至云,都需要大量的硬盤、閃存以及磁帶作為底層的存儲(chǔ)介質(zhì)。 數(shù)據(jù)以及硬盤、閃存和磁帶是大數(shù)據(jù)的血肉。
閃存市場(chǎng)上Violin、Fusion—IO等閃存廠商表現(xiàn)比較搶眼,另外EMC推出的全閃存陣列,英特爾、三星、華為的SSD產(chǎn)品以及IBM對(duì)TMS的收購(gòu)都是都體現(xiàn)了固態(tài)存儲(chǔ)的強(qiáng)大生命力。另外傳統(tǒng)硬盤市場(chǎng)經(jīng)過(guò)幾十年的發(fā)展只剩希捷、西部數(shù)據(jù)和東芝三足鼎立。