藍調 發(fā)表于:13年11月06日 14:19 [原創(chuàng)] DOIT.com.cn
“Big Data is like teenage sex”,有人將大數據比作青少年對于性的認知,大家都在談論大數據,卻很少有人真正知道怎么去利用大數據。個人認為這個比喻盡管有些欠妥,但還是非常貼切了形容了當前大數據發(fā)展的狀況。
數據顯示,當前只有6%的企業(yè)對大數據有較深度的應用。許多企業(yè)希望將大數據用起來,帶動企業(yè)的經營,但不知從哪里著手。它們不惜重金投資大數據信息系統(tǒng)、分析系統(tǒng),聘請更多的人才,希望能從這個新趨勢中獲益,不過卻無奈地發(fā)現(xiàn),大數據仍然停留在云端,沒有帶來多少實際收益。它們找不到大數據與業(yè)務結合的突破口。而一些真 正將大數據應用于實戰(zhàn)的企業(yè),卻在應用過程中困難重重:大數據無法與業(yè)務結合;沒有收集、分析海量數據的能力;經營人員缺少應用大數據的動力;數據來源魚龍混雜難以使用……
2013年10月19-31日,中國高性能計算領域盛會HPC China 2013在桂林隆重召開。這次大會上出現(xiàn)頻率最高的一個詞就是——大數據。無論是從Top100的排行榜來看,還是從大會的演講報告主題來看,大數據與高性能計算的結合已經是一個無法抵擋的趨勢。
過去在很多人眼里,高性能計算主要是用于科研計算。而近兩年,隨著云計算和大數據等應用趨勢的發(fā)展,高性能計算找到了新的應用空間。正如曙光副總裁邵宗有在接受DOIT記者采訪時談到,大數據是未來HPC應用的藍海,大數據將對HPC榜單產生更大的影響。
【圖】曙光副總裁邵宗有發(fā)表演講
事實上,大數據與高性能計算的融合是高性能計算技術不斷發(fā)展,以及大數據對于超強計算能力需求的必然結果。一方面,大數據的發(fā)展為高性能計算提供了更為廣闊的應用空間,無論是傳統(tǒng)的科研應用,還是金融、通訊、互聯(lián)網等高性能計算的新用戶,隨著數據量 越來越大,以及大部分用戶對于數據價值挖掘的意識不斷加強,一套高效、可靠、彈性擴展的數據處理方法和工具就變得非常必要了。另一方面,而隨著高性能計算 系統(tǒng)性能的日益提升,越來越多的用戶開始考慮采用高性能計算的集群來進行數據處理和分析。