北京并行科技總經(jīng)理陳健
29日上午,并行科技總經(jīng)理陳健進(jìn)行題為《高性能計算應(yīng)用運行過程的快速數(shù)據(jù)采集、分析和可視化》的主題演講。陳健說:“并行科技?xì)v經(jīng)6年時間,與眾多能源、制造、航天、氣象、教育科研、電信、金融等領(lǐng)域客戶進(jìn)行大量測試,總結(jié)出由十種顏色所代表的具有高對比度、易于分辨的性能指標(biāo)。”并行科技自主研發(fā)的機群性能及應(yīng)用運行特征分析軟件Paramon可視化的指標(biāo)包含4個區(qū)域:CPU區(qū)域、內(nèi)存(Memory)區(qū)域、磁盤(Disk)區(qū)域、網(wǎng)絡(luò)(Network)區(qū)域。
并行科技十色polo衫展示Paramon軟件可視化的十色性能指標(biāo)
在HPC China 2013大會現(xiàn)場,由并行科技10位代表人員身著10色polo衫展示了10種關(guān)鍵的性能指標(biāo),包括: CPU(all)%,即CPU總利用率所占的百分比,采用深綠色;Gflops%,代表CPU有效計算比例,即Gflops占峰值的比例,采用淺綠色;CPU(sywa)%代表CPU SYWA使用率,即內(nèi)核態(tài)占CPU時間百分比+等待IO請求占CPU時間百分比,采用酒紅色;Memory%為CPU內(nèi)存使用率,采用暗黃色;MemBW為內(nèi)存帶寬,采用亮黃色;Swap%即為SWAP使用速率,采用亮紅色;Net Send,網(wǎng)絡(luò)發(fā)送速率,采用粉色;Net Recv,網(wǎng)絡(luò)接收速率,采用青色;Disk Read,磁盤讀速率,橙色;Disk Write,磁盤寫速率,湖藍(lán)色。這些性能指標(biāo)在Paramon界面上廣泛用于為大規(guī)模機群應(yīng)用設(shè)計、分析、優(yōu)化提供大數(shù)據(jù)支撐,十色性能指標(biāo)polo衫在本屆大會已然成為無處不在的并行科技軟件產(chǎn)品Paramon和Paratune的最佳代言。
“對很多人而言,高性能計算有如陽春白雪,過于高端。HPC行業(yè)的發(fā)展趨勢即是讓更多的人較為直觀地看到一些應(yīng)用運行特征”,陳健說道。并行科技Paramon v4.0在HPC China 2013大會前期發(fā)布,并針對普通用戶增加了較為重要的特性:以往的Paramon安裝必須是管理員,新版Paramon增加了普通用戶適用模式,用戶在拿到并行科技提供的8GB U盤后,打開首界面正確選定即可安裝,正常情況下均會報告安裝成功。Paramon在并行科技研發(fā)人員的精心打造下,已然成為一款普適軟件,普通用戶也可便捷安裝使用,進(jìn)行HPC機群和Hadoop機群的數(shù)據(jù)采集和分析,并在此過程中實現(xiàn)大數(shù)據(jù)的可視化。
Paramon/Paratune為某銀行Hadoop大數(shù)據(jù)方案的實施提供理論與數(shù)據(jù)支撐
另外,隨著Hadoop大數(shù)據(jù)方案在金融領(lǐng)域的廣泛應(yīng)用,并行科技的Paramon、Paratune在指導(dǎo)銀行進(jìn)行設(shè)備選型和系統(tǒng)實施方面發(fā)揮了無可比擬的作用,進(jìn)一步開辟了并行科技在金融領(lǐng)域的廣闊市場。Paramon對銀行系統(tǒng)Hadoop中的數(shù)據(jù)導(dǎo)入HDFS、Hive數(shù)據(jù)倉庫MapReudce作業(yè)、Oozie工作流MapReduce作業(yè)進(jìn)行應(yīng)用運行特征采集,并通過Paratune應(yīng)用運行特征分析軟件對特征數(shù)據(jù)進(jìn)行分析,以可視化的方式展示出Hadoop大數(shù)據(jù)方案在不同運行場景下的資源依賴。通過對前期測試環(huán)境的數(shù)據(jù)采集和分析,Paramon、Paratune可視化性能數(shù)據(jù)已為銀行的IT技術(shù)團(tuán)隊直觀地建立了Hadoop大數(shù)據(jù)方案在不同運行場景下的性能模型,為Hadoop大數(shù)據(jù)方案的成功實施和進(jìn)一步的性能優(yōu)化提供充分的理論和數(shù)據(jù)支持。隨著數(shù)據(jù)采集、分析的不斷進(jìn)行,金融行業(yè)對并行科技Paramon、Paratune的應(yīng)用將加速Hadoop大數(shù)據(jù)方案的成功上線和應(yīng)用。
HPC China 2013并行科技展臺:大數(shù)據(jù)、可視化,開啟HPC的多彩視角
Paramon正逐步發(fā)展成為一個平臺,這個平臺能夠幫助用戶采集所需要的各種數(shù)據(jù),包含服務(wù)器的狀態(tài)、功耗、軟件的License使用情況、運行作業(yè)的情況等等,用戶需要的信息在此平臺上一目了然。同時,Paramon與Paratune能夠幫助用戶進(jìn)行實時數(shù)據(jù)中心可視化,以及離線的數(shù)據(jù)中心業(yè)務(wù)可視化,相當(dāng)于數(shù)據(jù)中心在經(jīng)歷了云計算將其業(yè)務(wù)以虛擬的方式管理運營之后,現(xiàn)在真正進(jìn)入了大數(shù)據(jù)年代。顯然,當(dāng)面對大量的業(yè)務(wù)、設(shè)備、數(shù)據(jù)時,并行科技的Paramon能夠提供從中快速定位所需要信息的可視化平臺,并在Paratune的協(xié)助下根據(jù)數(shù)據(jù)之間的依賴關(guān)系挖掘出更多有價值的信息,大數(shù)據(jù)管理勢不可擋,惟有握緊可視化利器Paramon,全面開啟HPC的多彩視角,方能正確指導(dǎo)企業(yè)未來的發(fā)展,指導(dǎo)整個數(shù)據(jù)中心的高效運營,在愈發(fā)激烈的競爭中穩(wěn)操勝券。