盡管之前的幾個項目通過編輯手動分配的位置元數(shù)據(jù)來映射維基百科條目,這些嘗試只占維基百科位置單元信息很小的一部分。該項目解鎖了文章本身的內(nèi)容,確定了所有四百萬頁面中的每個位置和日期,以及它們之間的聯(lián)系,以此創(chuàng)建出了一個龐大的網(wǎng)絡(luò)。
以全新的方式“看”維基百科
SGI首席營銷官兼戰(zhàn)略負責人Franz Aman(弗朗茨•阿曼)表示:“該分析讓世界能夠從繁雜的單個文章文本中退出來,從而看到維基百科中海量知識的全景,而不僅僅是每一頁的樹形視圖。我們可以看到整個人類最大的知識寶庫是如何演進的,并看到我們之前所不能看到的東西,如一定時空內(nèi)的全球情緒,或者知識覆蓋不到的盲區(qū)。我們之所以喜歡使用谷歌地圖是因為我們能夠縮放視圖,并得到大圖片視圖。憑借SGI UV 2,我們能夠?qū)⑼瑯拥母拍钸\用到大數(shù)據(jù)中,從整體上了解我們的大數(shù)據(jù)。”
從這項分析中我們可以看出,維基百科將其歷史覆蓋分為四個發(fā)展階段:1001-1500(中世紀),1501-1729(近現(xiàn)代時期),1730-2003(啟蒙時代),2004-2011(維基時代),其不斷發(fā)展似乎把更多地焦點放在了歷史事件的介紹上,而非增加當代記錄的文件。維基百科里關(guān)于每個年代的論調(diào)與當時的全球重大事件相吻合,比如過去1000年中,最具負面色彩的時期就是美國內(nèi)戰(zhàn),緊隨其后的是第二次世界大戰(zhàn)。分析還顯示,數(shù)字印刷收藏中20世紀的內(nèi)容出現(xiàn)很大空白的“版權(quán)差距”,可對于維基百科這不是問題,因為維基百科上從1924年到現(xiàn)在的內(nèi)容一直都在穩(wěn)定地以指數(shù)方式增長。
讓研究人員能夠以大數(shù)據(jù)的速度挖掘大數(shù)據(jù)
Leetaru(李塔魯)先生表示:“維基百科中的單向連接、連接缺乏,以及分布不均的信息框——所有這些因素都導致基于元數(shù)據(jù)的數(shù)據(jù)挖掘在維基百科這樣的館藏中有著極大的局限性。憑借SGI UV 2,可用的大型共享內(nèi)存讓我能夠接近實時地提出整個數(shù)據(jù)集的問題。輕輕點擊便可調(diào)出大量緩存相關(guān)的共享內(nèi)存,我只需簡單地寫下幾行代碼,并在整個數(shù)據(jù)集上運行,提出任何想到的問題。而這通過向外擴展計算方式是無法實現(xiàn)的。它非常類似于使用文字處理器而不是打字機——我能夠以完全不同的方式來進行研究,專注于成果而不是算法。”
分析方式
加載到SGI® UV™ 2000超級大腦 計算機中,這個龐大的數(shù)據(jù)集利用可識別維基百科上每個詞條中的每個位置和日期的算法,從而進行全文的地理編碼和完整的日期編碼。公元1000年到2012年間超過8000萬個位置和4200萬個日期都被提取出來,每篇文章平均有19個位置和11個日期(分別為每44個單詞出現(xiàn)一次位置,每75個單詞出現(xiàn)一次日期)。每個日期與每個位置間的連接被捕捉到一個代表維基歷史觀的龐大網(wǎng)絡(luò)中。通過這個設(shè)備,Leetaru(李塔魯)先生能夠?qū)GI UV 2上的整個數(shù)據(jù)集進行接近實時的分析,以便在整個時空創(chuàng)建視覺地圖,不僅看到歷史如何展現(xiàn),也看到過去一千年世界的整體景象,并交互測試各種理論和研究問題,所有這一切都能在一天之內(nèi)完成。
新的SGI UV:超級大腦計算機
SGI UV 2產(chǎn)品系列讓用戶能夠在一個系統(tǒng)上找到世界上最難解問題的答案,對于管理員來說,這個系統(tǒng)就像工作站一樣簡單。通過英特爾至強處理器E5系列而開發(fā)、運行標準Linux,并支持各種存儲選項,SGI UV 2為無限制計算提供完整、行業(yè)標準的解決方案。
SGI UV 2 能夠從僅配備 16 個內(nèi)核和 32 GB 內(nèi)存的最小配置起步,無縫進行擴展。相比前代產(chǎn)品,這一全新平臺的內(nèi)核數(shù)量增加了一倍(多達 4,096 個內(nèi)核),連貫主內(nèi)存容量翻了兩番(高達 64 TB),且能夠在單一映像系統(tǒng)中為內(nèi)存計算提供更有力的支持。SGI UV 2 可擴展至 8 PB 共享內(nèi)存,最高 I/O 速率可達 4 TB/秒(14 PB/小時),能夠在不到 3 秒的時間內(nèi)導入美國國會圖書館紙質(zhì)藏書的全部內(nèi)容。
SGI UV 2000即日起上市。SGI UV 20今天即可訂貨,并將于2012年8月開始發(fā)貨。起價為30,000美元。
查看圖片和視頻,請訪問:http://www.sgi.com/go/wikipedia。
關(guān)于SGI
作為技術(shù)計算領(lǐng)域值得信賴的領(lǐng)導者,SGI致力于幫助客戶應對他們大部分業(yè)務(wù)需求與技術(shù)上的嚴峻挑戰(zhàn)。垂詢詳情,敬請訪問:http://www.sgi.com.cn/。