(圖為李立松參與制作《HBase企業(yè)應用開發(fā)實戰(zhàn)》書籍)

《HBase企業(yè)應用開發(fā)實戰(zhàn)》主要是系統(tǒng)講解HBase理論和實戰(zhàn)的書籍,書中重點強調了HBase在企業(yè)的實際應用,立足于企業(yè)的實際生產環(huán)境,旨在幫助企業(yè)切實解決大數(shù)據(jù)技術如何落地的問題。

作者李立松畢業(yè)于黑龍江科技大學信息與科學技術專業(yè),畢業(yè)后一直從事數(shù)據(jù)開發(fā)相關工作,對Hadoop、Hive、Hbase等有深入透徹的研究和濃厚的興趣。2013年李立松加入締元信.網(wǎng)絡數(shù)據(jù),負責締元信DMP平臺的開發(fā)工作。

 

據(jù)李立松介紹,目前Hbase在締元信的主集群存儲了超過2萬多億結果數(shù)據(jù),23000多個在線region,最大的單表有5000多個region,達到每天新增入庫量上百億條的規(guī)模。龐大的入庫壓力迫使締元信不斷優(yōu)化Hbase,為此開發(fā)人員們開發(fā)了Hbase分布式入庫系統(tǒng),同時還開發(fā)了hbase監(jiān)控報警系統(tǒng),對Hbase的關鍵指標進行閥值監(jiān)控,發(fā)現(xiàn)超標問題,報警系統(tǒng)會把相關信息投遞到運維部門,運維值班人員會立即通知相關人員進行故障排除。
附:
一、公司介紹
北京締元信互聯(lián)網(wǎng)數(shù)據(jù)技術有限公司(以下簡稱:締元信)是中國領先的第三方互聯(lián)網(wǎng)數(shù)據(jù)服務提供商,是行業(yè)中唯一一家國家級高新技術企業(yè)。 締元信的數(shù)據(jù)產品有SiteRating網(wǎng)站流量監(jiān)測系統(tǒng)、AdRating網(wǎng)絡廣告效果監(jiān)測系統(tǒng)、ClickRating用戶點擊統(tǒng)計系統(tǒng)等。 此外,締元信已積累4億以上可連續(xù)分析的網(wǎng)民行為數(shù)據(jù),日平均數(shù)據(jù)處理能力達30億條,客戶群覆蓋國內主流媒體網(wǎng)站、政府行業(yè)主管機構、頂級4A代理機構及汽車、IT、快消、家電等行業(yè)的一線品牌企業(yè)。

二、DDMP(締元信數(shù)據(jù)管理平臺)介紹
締元信自主研發(fā)的DDMP數(shù)據(jù)管理平臺,基于締元信的數(shù)據(jù)統(tǒng)計業(yè)務,對中國互聯(lián)網(wǎng)用戶行為數(shù)據(jù)進行集中化、標準化、屬性化管理。采用了云存儲、云計算及智能語義分析技術,根據(jù)用戶的網(wǎng)上瀏覽和消費行為,對用戶進行消費傾向特征標識,并可通過多種API接口,將數(shù)據(jù)輸出給各種應用領域。DDMP是網(wǎng)絡數(shù)據(jù)挖掘分析的基礎,是各種定向廣告平臺、個性化推薦系統(tǒng)、在線商務智能分析的支撐系統(tǒng)。
分享到

zhoujianding

相關推薦