有效管理大數(shù)據(jù)的主要策略
CIO時代 發(fā)表于:13年06月06日 15:42 [轉(zhuǎn)載] CIO時代
據(jù)悉,Gartner最近的一份調(diào)查報告顯示,企業(yè)數(shù)據(jù)年平均增長速度大約在40%到60%。而美國政府在即將到來的大數(shù)據(jù)項目中將面臨重重挑戰(zhàn),其中之一就是生成數(shù)據(jù)量不足。一些生成大量數(shù)據(jù)機構(gòu)(包括國家天氣服務(wù)局、國家海洋和大氣管理局)的主管政府部門,美國商務(wù)部的這一數(shù)字甚至更低。
美國商務(wù)部CIOSimonSzykman在最近的FOSE大會上表示:“我們不存在挑戰(zhàn)的領(lǐng)域之一就是我們生成數(shù)據(jù)的能力。我們生成數(shù)據(jù)的基本能力提升很大,從很大程度上講,這一能力已超越了我們處理數(shù)據(jù)、管理數(shù)據(jù)和轉(zhuǎn)移數(shù)據(jù)的能力。”
如何管理數(shù)據(jù),并將數(shù)據(jù)從一點轉(zhuǎn)移到另一點,將是美國政府面臨的一大挑戰(zhàn)。Szykman還提到了商務(wù)部在大數(shù)據(jù)中遇到的其他一些重要問題,主要為以下五個方面:
數(shù)據(jù)的真實性
大數(shù)據(jù)的重要性不僅是在于數(shù)據(jù)所生成的記錄,更大的價值在于根據(jù)這些數(shù)據(jù)得出科研結(jié)果的“復(fù)制能力”。而從學(xué)術(shù)層面來看,這正是你證實所做工作價值的時候:其他人也可以對結(jié)果進(jìn)行復(fù)制。另一方面,如果你丟失了得出科研結(jié)果的那些數(shù)據(jù),這會降低結(jié)果的合理性。
數(shù)據(jù)工程師
研究領(lǐng)域的很多科學(xué)家正在研究大數(shù)據(jù)的精密使用,比如在預(yù)防醫(yī)學(xué)、藥品設(shè)計和胎兒檢查領(lǐng)域如何開發(fā)基因數(shù)據(jù)。但Szykman擔(dān)心的是,真正了都大數(shù)據(jù)技術(shù)構(gòu)架的人太少。我們需要好好想想大數(shù)據(jù)及我們?nèi)绾卫盟,特別是在一些特殊領(lǐng)域。無論是政府的直接應(yīng)用還是由政府出資科研,政府都在推動大數(shù)據(jù)這一前沿技術(shù)的發(fā)展。
大思路,早規(guī)劃
在向開放數(shù)據(jù)轉(zhuǎn)移的過程中,盡早搞清楚系統(tǒng)生命周期的要求顯得越來越重要。在過去,沒有做的一件事就是盡早研究開放數(shù)據(jù)在生命周期上的要求。數(shù)據(jù)模型、分享和信息的情況會越來越普遍,而系統(tǒng)性的戰(zhàn)略會越來越多。在生命周期的早期,當(dāng)我們成功安裝新的系統(tǒng)或應(yīng)用程序后,就應(yīng)該盡早考慮該問題。
保密性vs.完整性
對于那些有科研基礎(chǔ)的機構(gòu)而言,大數(shù)據(jù)安全不僅僅是一個保密問題。數(shù)據(jù)的長期完整性也是企業(yè)更大的擔(dān)憂。這是IT界一直為之努力的議題。有時候,我們過分關(guān)注結(jié)果而忽視了安全。人們有時會問:‘我們最終都要和公眾分享這一數(shù)據(jù),那安全有什么重要呢?’
這一問題的最佳答案來自科研機構(gòu),如NOAA。他們收集的基準(zhǔn)數(shù)據(jù)正巧是美國氣候變化政策備受爭議所在。不管這些政策的政治傾向性如何,它們都對經(jīng)濟(jì)有重大影響。如果我們放棄了這些長期氣候記錄數(shù)據(jù)的安全性,那將造成嚴(yán)重后果。我們的確得好好想想大數(shù)據(jù)的問題。
制定基準(zhǔn)線
由于很少存在類似的應(yīng)用程序,難以獲取相關(guān)信息或進(jìn)行比照,因此有時候很難評定大數(shù)據(jù)以及其他高科技項目的開支和風(fēng)險。出臺開支和風(fēng)險的基線,對大數(shù)據(jù)和數(shù)據(jù)中心來說都是一大挑戰(zhàn),因為還沒有相關(guān)標(biāo)準(zhǔn)。操作一些簡單事情有時候充滿挑戰(zhàn),如計算數(shù)據(jù)中心的能耗。大數(shù)據(jù)基線不僅在基礎(chǔ)設(shè)施層面,還包括數(shù)據(jù)包,都需要對未來資源進(jìn)行更優(yōu)規(guī)劃。
公司簡介 | 媒體優(yōu)勢 | 廣告服務(wù) | 客戶寄語 | DOIT歷程 | 誠聘英才 | 聯(lián)系我們 | 會員注冊 | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.