新品發(fā)布—贏領(lǐng)機(jī)器數(shù)據(jù)管理平臺(tái)
發(fā)布時(shí)間:2019年12月03日
經(jīng)過贏領(lǐng)開發(fā)人員精心研發(fā),在原有贏領(lǐng)信息監(jiān)控管理平臺(tái)的基礎(chǔ)上,2019年12月成功發(fā)布贏領(lǐng)機(jī)器數(shù)據(jù)管理平臺(tái)V1.0版本。
贏領(lǐng)機(jī)器數(shù)據(jù)管理平臺(tái)是實(shí)現(xiàn)對(duì)主機(jī)系統(tǒng)、網(wǎng)絡(luò)設(shè)備、數(shù)據(jù)庫、中間件等軟硬件可用性進(jìn)行監(jiān)控的管理系統(tǒng),采用分布式結(jié)構(gòu)采集數(shù)據(jù),提供強(qiáng)大的系統(tǒng)與網(wǎng)絡(luò)監(jiān)控的功能,極大方便管理人員隨時(shí)了解整個(gè)系統(tǒng)的運(yùn)行狀況,并能夠有效地幫助管理層解決各種基礎(chǔ)設(shè)施的監(jiān)視與管理難題。系統(tǒng)提供了拓?fù)涔芾?、告警管理、監(jiān)控管理、態(tài)勢(shì)感知等模塊,同時(shí)擁有豐富的報(bào)表功能。
系統(tǒng)架構(gòu)設(shè)計(jì)
系統(tǒng)架構(gòu)可分為業(yè)務(wù)中心、服務(wù)中心、數(shù)據(jù)采集中心、數(shù)據(jù)共享中心、實(shí)時(shí)數(shù)據(jù)消息中心、數(shù)據(jù)處理中心、數(shù)據(jù)檢索存儲(chǔ)中心。
業(yè)務(wù)中心:直接面對(duì)用戶提供業(yè)務(wù)交互,依據(jù)用戶業(yè)務(wù)的請(qǐng)求,觸發(fā)服務(wù)中心相應(yīng)服務(wù)的運(yùn)行,并從數(shù)據(jù)檢索存儲(chǔ)中心消費(fèi)相應(yīng)業(yè)務(wù)數(shù)據(jù)信息,并進(jìn)行業(yè)務(wù)處理后,將業(yè)務(wù)數(shù)據(jù)或信息交付給用戶。
服務(wù)中心:服務(wù)中心提供本案基礎(chǔ)核心服務(wù),比如監(jiān)控對(duì)象的自動(dòng)發(fā)現(xiàn)服務(wù)、輪詢調(diào)度服務(wù)、網(wǎng)元管理服務(wù)、采集探針管理服務(wù)、以及一系列接口服務(wù)等,該服務(wù)中心對(duì)外提供統(tǒng)一的數(shù)據(jù)采集調(diào)度服務(wù),屏蔽了復(fù)雜的分布式采集、發(fā)現(xiàn)、調(diào)度、監(jiān)控等一些列交互和配置以及操作。
實(shí)時(shí)數(shù)據(jù)消息中心:該中心負(fù)載接受數(shù)據(jù)采集中心產(chǎn)生的實(shí)時(shí)數(shù)據(jù)消息,并轉(zhuǎn)發(fā)對(duì)應(yīng)消息的消費(fèi)者,即實(shí)時(shí)數(shù)據(jù)處理中心。同時(shí)該中心也能接受第三方實(shí)時(shí)數(shù)據(jù),并轉(zhuǎn)發(fā)給實(shí)時(shí)數(shù)據(jù)處理中心進(jìn)行消費(fèi)。
數(shù)據(jù)共享中心:所有中心都可以通過該中心共享公共數(shù)據(jù)和信息,也可以發(fā)布各自中心消息給其他中心的訂閱者去消費(fèi),真正做到一處發(fā)現(xiàn)、全局可用,從而真正做到全局統(tǒng)一一致的資源、流程和狀態(tài)。
數(shù)據(jù)檢索存儲(chǔ)中心:該中心負(fù)責(zé)所有實(shí)時(shí)數(shù)據(jù)和非關(guān)系型數(shù)據(jù)的檢索和存儲(chǔ),該中心有能力存儲(chǔ)和檢索海量實(shí)時(shí)數(shù)據(jù)。
實(shí)時(shí)數(shù)據(jù)處理中心:該中心負(fù)責(zé)調(diào)度各種實(shí)時(shí)數(shù)據(jù)消費(fèi)者,在并行的工作者上進(jìn)行并發(fā)的數(shù)據(jù)流模式處理,從而能最大效能的實(shí)時(shí)處理消費(fèi)數(shù)據(jù)。
數(shù)據(jù)采集中心:數(shù)據(jù)采集采用分布式架構(gòu),依據(jù)用戶定制的資源模型和采集模型,以及配置區(qū)域范圍和采集探針,自動(dòng)在指定區(qū)域內(nèi)發(fā)現(xiàn)、采集或監(jiān)聽各種協(xié)議數(shù)據(jù)和消息,并能在指定區(qū)域內(nèi)負(fù)載均衡相應(yīng)探針的工作負(fù)載。
?
技術(shù)架構(gòu)設(shè)計(jì)及實(shí)現(xiàn)方法
贏領(lǐng)機(jī)器數(shù)據(jù)管理平臺(tái)的技術(shù)架構(gòu)擁有以下幾方面特性:
u? 基于先進(jìn)的容器平臺(tái)技術(shù),全面采用微服務(wù)架構(gòu),提高了服務(wù)可靠性、可用性和可維護(hù)性;
u? 基于集群負(fù)載均衡技術(shù),極大提高了服務(wù)的可靠穩(wěn)定性;
u? 采用高可靠的分布式采集技術(shù),極大實(shí)現(xiàn)了海量數(shù)據(jù)的采集、過濾和規(guī)整;
u? 采用高可靠高并發(fā)吞吐的消息中間件集群,切實(shí)保障了實(shí)時(shí)數(shù)據(jù)的可靠性;
u? 采用高可靠的并行流處理引擎,極大提高了海量實(shí)時(shí)數(shù)據(jù)的實(shí)時(shí)處理性能;
u? 采用高性能的數(shù)據(jù)檢索和存儲(chǔ)集群,切實(shí)為用戶提供數(shù)以億計(jì)的數(shù)據(jù)存儲(chǔ)和檢索。
?
軟件部署示意圖(監(jiān)控1000設(shè)備為例):
1000臺(tái)網(wǎng)絡(luò)設(shè)備,意味著要監(jiān)控1000+1000*50=5萬1千個(gè)資源節(jié)點(diǎn),平均每個(gè)資源節(jié)點(diǎn)有15個(gè)指標(biāo),每個(gè)指標(biāo)大約70個(gè)字節(jié),那就是每次輪詢并發(fā)的數(shù)據(jù)量是5萬1千*15*70=500萬1千*35=1億5千2百80萬字節(jié),這些還不包括日志的數(shù)據(jù)量。該系統(tǒng)能夠在30秒內(nèi)處理完這些數(shù)據(jù),50秒內(nèi)全部入庫,0.08秒內(nèi)檢索出數(shù)據(jù)。
產(chǎn)品價(jià)值
-
技術(shù)先進(jìn)性
系統(tǒng)采用業(yè)界最先進(jìn)最可靠最高效的技術(shù)和標(biāo)準(zhǔn)設(shè)計(jì)開發(fā),能夠保證用戶投資的有效性和延續(xù)性;支持常用的操作系統(tǒng)平臺(tái)、常用的數(shù)據(jù)庫系統(tǒng)、常用的應(yīng)用服務(wù)器平臺(tái)和常用的工具。
-
穩(wěn)定可靠性
系統(tǒng)的設(shè)計(jì)在系統(tǒng)架構(gòu)、設(shè)計(jì)方案和適用性等多方面綜合考慮,保證系統(tǒng)的無故障運(yùn)行。系統(tǒng)部署支持高可用,(單機(jī)負(fù)載和/n-1)小于單機(jī)總資源的70%。即使遭遇最極端大樓停電情況,一旦來電設(shè)備重啟,系統(tǒng)完全能無需人工干預(yù)即可正?;謴?fù)運(yùn)轉(zhuǎn)。
-
可維護(hù)性
提供簡(jiǎn)潔、方便、有效的管理工具和界面,簡(jiǎn)單易用,方便操作,貼近用戶實(shí)際需求,符合用戶日常需求管理習(xí)慣,有完整的系統(tǒng)文檔,能夠使系統(tǒng)管理員集中方便地配置、監(jiān)視、控制、診斷整個(gè)系統(tǒng),并且能夠監(jiān)視和控制系統(tǒng)情況、提高效率、消除隱患。
-
?數(shù)據(jù)安全性
系統(tǒng)保證信息的安全性,即保證此系統(tǒng)中的信息能夠安全存儲(chǔ),并有良好的數(shù)據(jù)備份和快速恢復(fù)方案;采用嚴(yán)格的安全體系,保證數(shù)據(jù)在采集、處理、傳輸、存儲(chǔ)、使用全過程的安全性;保證系統(tǒng)能夠正常運(yùn)行,不被攻擊破壞;系統(tǒng)滿足系統(tǒng)等級(jí)保護(hù)、網(wǎng)絡(luò)規(guī)劃等相關(guān)規(guī)定。