獨(dú)創(chuàng)的五層大數(shù)據(jù)平臺架構(gòu)

星環(huán)科技在TDH 8.0中首次采用了獨(dú)創(chuàng)的五層大數(shù)據(jù)平臺架構(gòu),其中最底層是貼合服務(wù)器硬件和操作系統(tǒng)的統(tǒng)一的資源調(diào)度層——星環(huán)云操作系統(tǒng)TCOS。TCOS針對多模型數(shù)據(jù)庫的技術(shù)特點,優(yōu)化了資源調(diào)度策略,提升了產(chǎn)品性能,為用戶提供高性價比的解決方案。

尤其值得一提的是TCOS 基于先進(jìn)的云原生技術(shù)構(gòu)建,適配了多種主流的CPU架構(gòu)和多種操作系統(tǒng),支持不同硬件、不同操作系統(tǒng)的服務(wù)器混合部署。在集群擴(kuò)容時,客戶不用擔(dān)心新舊設(shè)備兼容性問題,資源利用率更高。

TCOS之上是存儲層。在存儲管理層,星環(huán)開發(fā)了統(tǒng)一的分布式數(shù)據(jù)管理系統(tǒng)TDDMS,為不同存儲引擎提供公共的存儲管理服務(wù),包括保障數(shù)據(jù)均勻分布、負(fù)載均衡等數(shù)據(jù)分片服務(wù),多副本管理、數(shù)據(jù)一致性等數(shù)據(jù)高可用服務(wù),以及數(shù)據(jù)平滑擴(kuò)容縮容等服務(wù)。

在存儲引擎層,TDH 8.0提供了8種獨(dú)立的存儲引擎,支持業(yè)界主流的10種存儲模型。獨(dú)立的存儲引擎保障了不同存儲模型的高性能。用戶可以根據(jù)業(yè)務(wù)的需要,隨時增減不同的存儲引擎,做到資源按需分配。

存儲層之上是計算層。TDH 8.0使用了星環(huán)科技自研的統(tǒng)一的分布式計算引擎Transwarp Nucleon核子,實現(xiàn)高性能跨模型計算。計算引擎能根據(jù)不同的存儲引擎自動匹配高性能算法,無需用戶手工干預(yù),從而便捷地實現(xiàn)跨庫關(guān)聯(lián),避免數(shù)據(jù)導(dǎo)入導(dǎo)出。

最上層是星環(huán)科技統(tǒng)一的SQL編譯器Transwarp Quark。TDH中的各個數(shù)據(jù)庫產(chǎn)品遵從一致的SQL規(guī)范??蛻舨粫驗閳鼍扒袚Q、數(shù)據(jù)庫切換而造成接口、開發(fā)語言的切換而煩惱,開發(fā)人員學(xué)習(xí)成本低,開發(fā)的代碼可移植性強(qiáng),技術(shù)對接容易。

在架構(gòu)上,TDH采用的存算解耦架構(gòu),可以構(gòu)建服務(wù)于整個企業(yè)的統(tǒng)一數(shù)據(jù)資源庫,讓不同部門的數(shù)據(jù)間的隔閡徹底打破,使跨部門數(shù)據(jù)靈活調(diào)用擁有了技術(shù)支撐。用戶可以根據(jù)業(yè)務(wù)的變動,按需創(chuàng)建新模型,按需申請計算和存儲資源。任務(wù)的生命周期結(jié)束時,可以釋放占用的計算和存儲資源,回收到集群資源池中。

星環(huán)科技獨(dú)創(chuàng)的存算完全解耦,為客戶提供了存儲能力和計算資源獨(dú)立擴(kuò)容的能力,帶來高度彈性與資源利用率最大化,為用戶提供最適合業(yè)務(wù)需要的資源配置。

八款異構(gòu)存儲引擎 同時支持10種存儲模型

當(dāng)今“單一模型數(shù)據(jù)庫多個并用”模式面臨諸多難題,如開發(fā)接口不統(tǒng)一,操作難度高,維護(hù)成本高,數(shù)據(jù)跨庫關(guān)聯(lián)困難,資源擴(kuò)容縮容不靈活等。如何解決用戶面臨的這些問題,使得數(shù)據(jù)庫能夠進(jìn)行跨部門、跨業(yè)務(wù)的數(shù)據(jù)統(tǒng)一存儲與管理,實現(xiàn)多業(yè)務(wù)數(shù)據(jù)融合,支撐多樣化的應(yīng)用服務(wù),成為企業(yè)用戶大數(shù)據(jù)應(yīng)用的重要需求。

去年5月星環(huán)科技TDH 7.0發(fā)布時,星環(huán)科技首次公開展示了“統(tǒng)一計算框架,統(tǒng)一數(shù)據(jù)管理,按需增減異構(gòu)數(shù)據(jù)存儲引擎的多模型數(shù)據(jù)平臺架構(gòu)”,不僅能解決企業(yè)用戶面臨的這些難題,還能在性能上超越“單一模型數(shù)據(jù)庫多個并用”模式。

本次發(fā)布的TDH 8.0進(jìn)一步完善了10種主流存儲模型的兼容性,能夠支撐用戶各種挑戰(zhàn)的、高階的數(shù)據(jù)分析場景。 

據(jù)悉,TDH 8.0通過8種獨(dú)立的存儲引擎,支持業(yè)界主流的10種存儲模型。這8種存儲引擎是:關(guān)系型數(shù)據(jù)存儲引擎、寬表存儲引擎、搜索引擎、地理空間存儲引擎、圖存儲引擎、鍵值存儲引擎、事件存儲引擎和時序存儲引擎。

用戶可以根據(jù)業(yè)務(wù)的需要隨時增減不同的存儲引擎,做到資源按需分配。

四款大數(shù)據(jù)工具組件升級 

TDH 8.0全面升級的四款大數(shù)據(jù)工具組件,讓系統(tǒng)的安裝部署、擴(kuò)容升級、安全防衛(wèi)、風(fēng)險告警、權(quán)限管理等工作變得更便捷。

通過平臺配套的Transwarp Manager 管理服務(wù)產(chǎn)品,用戶只需通過幾個手動步驟,就可以部署一個TDH集群??梢暬慕缑孀孴DH的安裝、配置十分輕松。產(chǎn)品的健康檢測、度量、監(jiān)控、告警功能,也讓集群的管理和運(yùn)維變得簡單、容易。同時,TDH 8.0適配了多種國產(chǎn)平臺和操作系統(tǒng),提升了節(jié)點通信安全性和可靠性,對圖形界面做了改進(jìn),帶給用戶更好的使用體驗。

Transwarp Guardian是TDH配套的安全管理產(chǎn)品。它保護(hù)集群免受惡意攻擊和安全威脅,提供靈活安全的權(quán)限配置,并且可以對資源做細(xì)粒度的ACL控制。在TDH 8.0版本中,Transwarp Guardian 新增了豐富的運(yùn)行指標(biāo),優(yōu)化了高并發(fā)權(quán)限查詢性能,改善了信息的總體展示效果,用戶能夠更清晰、更直觀地了解平臺的潛在安全風(fēng)險,從而及時做出相應(yīng)的優(yōu)化策略。

作為TDH平臺中最常使用的組件,Transwarp Aquila智能運(yùn)維產(chǎn)品,提供了監(jiān)控儀表盤、告警通知、日志生命周期管理、日志檢索、審計日志等多項功能,幫助運(yùn)維人員從各個維度便捷的運(yùn)維整個集群。TDH 8.0版本優(yōu)化了告警策略和通知模板,新增了豐富的指標(biāo)、日志和告警規(guī)則,加入了拓?fù)湔故镜雀呒夁\(yùn)維功能。

TDH配套的一站式審計產(chǎn)品Transwarp Audit整合了大數(shù)據(jù)平臺各節(jié)點中的監(jiān)控信息,實現(xiàn)了對數(shù)據(jù)訪問和操作的集中監(jiān)控、查看和管理的智能化、可視化審計。在TDH 8.0版本豐富了審計規(guī)則,利用決策引擎判定安全風(fēng)險,自動發(fā)現(xiàn)異常訪問、越權(quán)操作等安全問題,并通過短信郵件推送到相關(guān)人員報備。

數(shù)據(jù)庫和大數(shù)據(jù)技術(shù)融合發(fā)展大勢所趨。星環(huán)新一代的多模型數(shù)據(jù)管理平臺TDH 8.0應(yīng)時而生,用簡潔清晰的技術(shù)架構(gòu),支持紛繁復(fù)雜、千變?nèi)f化的用戶場景,在追求極致性能的同時,提供易開發(fā)、易運(yùn)維的一站式服務(wù),讓用戶通過便捷的接入的方式,友好的開發(fā)環(huán)境,輕松地搭建、開發(fā)、運(yùn)維自己的數(shù)據(jù)平臺和應(yīng)用。

分享到

xiesc

相關(guān)推薦