直接分析云中數(shù)據(jù) 大數(shù)據(jù)分析將可轉(zhuǎn)移至云中
網(wǎng)界網(wǎng) 發(fā)表于:13年06月28日 10:50 [轉(zhuǎn)載] DOIT.com.cn
你能否想象你將數(shù)據(jù)存儲在云中,并在不需要移動數(shù)據(jù)的情況下,對數(shù)據(jù)運行復(fù)雜的查詢和分析?這是高性能云計算基礎(chǔ)設(shè)施和大數(shù)據(jù)分析公司Joyent試圖通過其新的Joyent Manta存儲服務(wù)解決的問題。
Manta是下一代云計算對象存儲和數(shù)據(jù)服務(wù)平臺,旨在將計算和分析功能直接引入到云中客戶的數(shù)據(jù)。
“個人電腦的殺手級應(yīng)用是電子表格,”Joyent公司工程副總裁Bryan Cantrill(他花了三年時間來專心制造Manta)表示,“電子表示是殺手級應(yīng)用的原因是因為它融合了數(shù)據(jù)和計算,它讓業(yè)務(wù)人員在其桌面運行數(shù)據(jù),而他們不需要分時程序來做到這一點。”
云計算存儲將兩個支柱技術(shù)融合在一起,即數(shù)據(jù)和網(wǎng)絡(luò),而現(xiàn)在,Manta更進了一步。
Manta是云計算電子表格嗎?
“我認為Manta是云計算中的電子表格,”Cantril表示,“它開辟了對非結(jié)構(gòu)化數(shù)據(jù)的分析的新局面。我們正在做的事情是將計算與數(shù)據(jù)和網(wǎng)絡(luò)相融合,我們將這三者融合到單個設(shè)施。這三者統(tǒng)一到單個產(chǎn)品,將會形成計算、網(wǎng)絡(luò)和數(shù)據(jù)的‘圣三位一體’。”
Cantrill表示,通過消除管理基礎(chǔ)設(shè)施和移動數(shù)據(jù)的需要,Manta讓企業(yè)能夠更快更容易地處理大數(shù)據(jù),同時保持這些數(shù)據(jù)的安全,并在價格上與亞馬遜公共云看齊。
“如果你的產(chǎn)品在價格上不具有競爭力的話,你真的沒辦法將這個產(chǎn)品推向市場,”他表示,“我們認為除了價格,云計算還有更多可競爭的地方,但在開始 時,你不能高估了產(chǎn)品的價格。你會為存儲支付S3的價格,并且,你會為用于加速你的數(shù)據(jù)的任何計算來支付EC2或者Joyent基礎(chǔ)設(shè)施即服務(wù)的價格,你 可能會啟動一秒、兩秒或者三秒,如果是這樣的話,你只需支付一秒、兩秒和三秒的計算。”
例如,你可能想要對你的備份進行定期驗證檢查。你通常不會這樣做,因為這將意味著將你所有的備份拖回到計算。但是,通過Manta,這種驗證測試將變得非常簡單,你只需要在備份上啟動計算(它們只會存在幾微妙)。
Manta讓你能夠執(zhí)行很多計算任務(wù),包括日志分析、搜索索引生成、財務(wù)分析和其他數(shù)據(jù)密集型任務(wù),而不需要移動數(shù)據(jù)或者設(shè)置計算集群和處理軟件。 Cantrill解釋說,代碼被并行引入到安全容器內(nèi)的物理服務(wù)器,同時,數(shù)據(jù)則通過行業(yè)標(biāo)準(zhǔn)的MapReduce模式進行自動合并。
無需從存儲復(fù)制數(shù)據(jù)到計算集群
網(wǎng)上購物社區(qū)Wanelo首席技術(shù)官Konstantin Gredeskoul表示,從存儲復(fù)制數(shù)據(jù)到計算集群可能需要花幾個小時。
Gredeskoul表示:“Joyent Manta存儲服務(wù)讓企業(yè)不需要移動數(shù)據(jù),就能進行近瞬時的專門查詢和分析,無縫且具有成本效益。我們現(xiàn)在能夠在幾分鐘之內(nèi)對數(shù)百GB的數(shù)據(jù)進行復(fù)雜的隊 列分析和生成保留報告。當(dāng)你將這與數(shù)據(jù)倉庫等傳統(tǒng)方法相比時,這非常具有改革性。”
“世界上50%的智能手機流量要通過愛立信,我們正在不斷評估新的技術(shù)來提高網(wǎng)絡(luò)管理日益增長的數(shù)據(jù)的能力,同時確保安全性、保密性和成本效益,” 愛立信公司戰(zhàn)略和市場營銷負責(zé)人兼首席執(zhí)行官Vish Nandlall表示,“Joyent公司新的計算存儲創(chuàng)新是一個根本的模式轉(zhuǎn)變,改變了對象存儲和高性能大數(shù)據(jù)分析的經(jīng)濟性和實用性。”
Joyent Manta存儲服務(wù)提供以下功能:
具有細粒度復(fù)制控制的多數(shù)據(jù)中心對象存儲
沒有對象大小限制
非常一致的寫入和高度可用的讀取
每個對象復(fù)制策略
文件系統(tǒng)風(fēng)格的命名空間,包括目錄查詢
Manta的功能源自操作系統(tǒng)級別的虛擬化
Cantrill指出,Joyent實現(xiàn)這些功能主要通過專注于OS級別的虛擬化,而不是專注于硬件虛擬化。操作系統(tǒng)虛擬化讓Joyent能夠在存儲對象的面向互聯(lián)網(wǎng)的對象存儲中,對其啟動計算。
“如果你需要支持傳統(tǒng)的操作系統(tǒng),虛擬硬件非常強大,”他表示,“但是如果你想要為客戶提供最高水平的性能體驗,你不能虛擬化硬件,你應(yīng)該要虛擬化整個操作系統(tǒng)。應(yīng)用程序直接在硬件上運行,并且是以安全和密封的方式。”
“你能夠有效地將你的分析工具引入到云計算中,”他補充說,“你可以在你的數(shù)據(jù)上運行任何你想要的程序:Java、Python、Perl或者只是 Unix Shell。如果你有你自己的分析工具或者其他工具,或者如果你有任何分析軟件,你都可以將它們推入到云中,對目標(biāo)數(shù)據(jù)進行分析。”
Joyent目前已經(jīng)與數(shù)據(jù)存儲管理公司Panzura建立了合作伙伴關(guān)系,來幫助客戶安全地將其數(shù)據(jù)從現(xiàn)有的NAS、備份和歸檔存儲遷移到Manta。
公司簡介 | 媒體優(yōu)勢 | 廣告服務(wù) | 客戶寄語 | DOIT歷程 | 誠聘英才 | 聯(lián)系我們 | 會員注冊 | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.