藍調 發(fā)表于:13年11月06日 14:19 [原創(chuàng)] DOIT.com.cn
“Big Data is like teenage sex”,有人將大數(shù)據(jù)比作青少年對于性的認知,大家都在談論大數(shù)據(jù),卻很少有人真正知道怎么去利用大數(shù)據(jù)。個人認為這個比喻盡管有些欠妥,但還是非常貼切了形容了當前大數(shù)據(jù)發(fā)展的狀況。
數(shù)據(jù)顯示,當前只有6%的企業(yè)對大數(shù)據(jù)有較深度的應用。許多企業(yè)希望將大數(shù)據(jù)用起來,帶動企業(yè)的經營,但不知從哪里著手。它們不惜重金投資大數(shù)據(jù)信息系統(tǒng)、分析系統(tǒng),聘請更多的人才,希望能從這個新趨勢中獲益,不過卻無奈地發(fā)現(xiàn),大數(shù)據(jù)仍然停留在云端,沒有帶來多少實際收益。它們找不到大數(shù)據(jù)與業(yè)務結合的突破口。而一些真 正將大數(shù)據(jù)應用于實戰(zhàn)的企業(yè),卻在應用過程中困難重重:大數(shù)據(jù)無法與業(yè)務結合;沒有收集、分析海量數(shù)據(jù)的能力;經營人員缺少應用大數(shù)據(jù)的動力;數(shù)據(jù)來源魚龍混雜難以使用……
2013年10月19-31日,中國高性能計算領域盛會HPC China 2013在桂林隆重召開。這次大會上出現(xiàn)頻率最高的一個詞就是——大數(shù)據(jù)。無論是從Top100的排行榜來看,還是從大會的演講報告主題來看,大數(shù)據(jù)與高性能計算的結合已經是一個無法抵擋的趨勢。
過去在很多人眼里,高性能計算主要是用于科研計算。而近兩年,隨著云計算和大數(shù)據(jù)等應用趨勢的發(fā)展,高性能計算找到了新的應用空間。正如曙光副總裁邵宗有在接受DOIT記者采訪時談到,大數(shù)據(jù)是未來HPC應用的藍海,大數(shù)據(jù)將對HPC榜單產生更大的影響。
【圖】曙光副總裁邵宗有發(fā)表演講
事實上,大數(shù)據(jù)與高性能計算的融合是高性能計算技術不斷發(fā)展,以及大數(shù)據(jù)對于超強計算能力需求的必然結果。一方面,大數(shù)據(jù)的發(fā)展為高性能計算提供了更為廣闊的應用空間,無論是傳統(tǒng)的科研應用,還是金融、通訊、互聯(lián)網等高性能計算的新用戶,隨著數(shù)據(jù)量 越來越大,以及大部分用戶對于數(shù)據(jù)價值挖掘的意識不斷加強,一套高效、可靠、彈性擴展的數(shù)據(jù)處理方法和工具就變得非常必要了。另一方面,而隨著高性能計算 系統(tǒng)性能的日益提升,越來越多的用戶開始考慮采用高性能計算的集群來進行數(shù)據(jù)處理和分析。