敏捷數(shù)據(jù)管理平臺(ADM)由管理控制中心(Master)、數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)、***服務(wù)節(jié)點(diǎn)(SDMServer)、客戶端(Client)組成,服務(wù)節(jié)點(diǎn)可通過主備節(jié)點(diǎn)部署實(shí)現(xiàn)高可用,通過靈活的橫向節(jié)點(diǎn)擴(kuò)展實(shí)現(xiàn)功能擴(kuò)展和容量擴(kuò)充,每個(gè)服務(wù)節(jié)點(diǎn)可以安裝在物理服務(wù)器或虛擬服務(wù)器中。一個(gè)或多個(gè)客戶端連接到服務(wù)節(jié)點(diǎn),組成一個(gè)完整的數(shù)據(jù)管理平臺,客戶端負(fù)責(zé)收集數(shù)據(jù)、傳輸數(shù)據(jù),服務(wù)節(jié)點(diǎn)負(fù)責(zé)接收數(shù)據(jù)、存儲數(shù)據(jù)、數(shù)據(jù)脫敏以及管理數(shù)據(jù)。敏捷數(shù)據(jù)管理平臺(ADM)由4個(gè)模塊組成:數(shù)據(jù)服務(wù)節(jié)點(diǎn)(CDMServer)包括數(shù)據(jù)備份模塊(PDM)、數(shù)據(jù)校驗(yàn)?zāi)K(BDM)、數(shù)據(jù)交付模塊(TDM)3個(gè)模塊;***服務(wù)節(jié)點(diǎn)(SDMServer)包括數(shù)據(jù)脫敏模塊(SDM)1個(gè)模塊。上訊ADM產(chǎn)品通過虛擬數(shù)據(jù)秒級分發(fā)功能實(shí)現(xiàn)測試數(shù)據(jù)的同時(shí)在線交付,縮短了數(shù)據(jù)交付的時(shí)間。工商銀行CDM應(yīng)用
上訊敏捷數(shù)據(jù)管理平臺(ADM)既可以封裝在敏捷數(shù)據(jù)管理流程的中間環(huán)節(jié),也可以單獨(dú)作為敏感數(shù)據(jù)處理的抽取平臺,兩種模式滿足了當(dāng)前用戶對數(shù)據(jù)處理的全部需求。 提供系統(tǒng)用戶角色權(quán)限的配置管理,負(fù)責(zé)系統(tǒng)角色用戶功能的劃分,操作權(quán)限的分配,負(fù)責(zé)處理任務(wù)向上級的申請,上級用戶負(fù)責(zé)審批、轉(zhuǎn)發(fā)、會簽或駁回以及復(fù)核工作的需求。當(dāng)前系統(tǒng)內(nèi)置豐富的算法,具備廣義的通用型規(guī)則,包括字符替換、隨機(jī)生成、截短、加權(quán)生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號、證件號、地址、組織機(jī)構(gòu)代碼等數(shù)據(jù)的有效性、可用性,算法經(jīng)優(yōu)化已處理超長字符截?cái)嗪椭貜?fù)數(shù)據(jù)的問題。人工操作流程繁瑣上訊ADM產(chǎn)品是集數(shù)據(jù)備份管理、備份校驗(yàn)管理、數(shù)據(jù)副本管理、敏感數(shù)據(jù)處理四位一體的數(shù)據(jù)管理產(chǎn)品。
在數(shù)據(jù)收集和使用上,通過獲取一份具有應(yīng)用一致性保證的“黃金副本”,分鐘級虛擬化為多個(gè)副本直接掛載使用,數(shù)據(jù)使用效率明顯得到提升;在數(shù)據(jù)存儲和傳輸上,這些虛擬數(shù)據(jù)副本相對原始存儲幾乎不占用存儲空間(約為0),且ADM產(chǎn)品將全部數(shù)據(jù)集中存放在統(tǒng)一的存儲池中,既保證了數(shù)據(jù)傳輸流轉(zhuǎn)的閉環(huán)管控,又降低了數(shù)據(jù)的存儲成本;在數(shù)據(jù)加工上,數(shù)據(jù)脫離生產(chǎn)環(huán)境之前增設(shè)了敏感數(shù)據(jù)處理環(huán)節(jié),保障數(shù)據(jù)公開后的隱私安全,防止核心數(shù)據(jù)泄露;在數(shù)據(jù)的提供和公開上,虛擬數(shù)據(jù)副本可用于準(zhǔn)生產(chǎn)、測試環(huán)境等場景的數(shù)據(jù)交付,每一份虛擬數(shù)據(jù)都是互不影響的,并且可讀可寫,數(shù)據(jù)在經(jīng)過變更后可標(biāo)記快照,多個(gè)快照之間可以任意切換實(shí)現(xiàn)數(shù)據(jù)版本的管理。
上訊信息敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM(副本數(shù)據(jù)管理)的數(shù)據(jù)庫虛擬化技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗(yàn)證、安全***、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案,在保證數(shù)據(jù)安全使用的同時(shí),提高了數(shù)據(jù)使用效率并降低了數(shù)據(jù)存儲成本。ADM由數(shù)據(jù)備份管理、備份校驗(yàn)管理、數(shù)據(jù)副本管理、數(shù)據(jù)脫敏管理組成,實(shí)現(xiàn)了數(shù)據(jù)復(fù)制容災(zāi)、數(shù)據(jù)存儲管理和數(shù)據(jù)流程管理,通過自動化流程任務(wù)編排的方式實(shí)現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了數(shù)據(jù)資產(chǎn)的潛在價(jià)值。上訊信息敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持全域重刪技術(shù),重刪指紋庫重建功能。
l數(shù)據(jù)壓縮存儲ADM支持同步數(shù)據(jù)壓縮,自動化地將同步數(shù)據(jù)按照3:1的比例壓縮,系統(tǒng)存儲空間顯示已壓縮的容量大小,存儲即壓縮。l自助式數(shù)據(jù)服務(wù)ADM不僅可以靈活地提供任意時(shí)間點(diǎn)的數(shù)據(jù),還可以對虛擬數(shù)據(jù)庫進(jìn)行圖形化、自助式的管理。l虛擬數(shù)據(jù)庫集中管控虛擬數(shù)據(jù)庫集中管控是對虛擬數(shù)據(jù)庫在使用過程中的狀態(tài)進(jìn)行管理,包括如下功能:①虛擬數(shù)據(jù)庫版本管理②虛擬數(shù)據(jù)庫共享管理③虛擬數(shù)據(jù)庫記錄查詢l敏感信息智能掃描ADM內(nèi)置敏感信息匹配庫,對數(shù)據(jù)庫的敏感信息進(jìn)行智能定義掃描,成功發(fā)現(xiàn)后自動匹配成敏感類型,以匹配度和敏感信息類型進(jìn)行靈活排序,避免漏掃。l關(guān)聯(lián)關(guān)系保持一致支持對數(shù)據(jù)庫中表間和表內(nèi)的約束信息和索引信息進(jìn)行***,支持視圖、序列、觸發(fā)器、存儲過程等數(shù)據(jù)對象的抽取,保持***前后數(shù)據(jù)關(guān)系的一致。數(shù)據(jù)安全領(lǐng)域數(shù)據(jù)安全治理的產(chǎn)品有哪些?副本數(shù)據(jù)
上訊ADM專注于備份數(shù)據(jù)的合理合法開發(fā)利用。工商銀行CDM應(yīng)用
ADM平臺具備根據(jù)管理人員、測試需求等內(nèi)容的不同進(jìn)行分組劃分的功能,將處理過的數(shù)據(jù)進(jìn)行分組管理,從下游測試數(shù)據(jù)管理的源頭管控?cái)?shù)據(jù)資源的類別,做到從源頭劃分類別,使下游測試數(shù)據(jù)管理形成上游數(shù)據(jù)源-中游數(shù)據(jù)中轉(zhuǎn)-下游數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動化的資源管理也更有效地為金融行業(yè)用戶提供安全的數(shù)據(jù)管理方案。同時(shí),ADM提供對數(shù)據(jù)流轉(zhuǎn)的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務(wù)器,以及數(shù)據(jù)快照的層級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進(jìn)行預(yù)覽,通過可視化的結(jié)構(gòu)拓?fù)鋱D,幫助用戶了解下游測試網(wǎng)中測試數(shù)據(jù)的歸屬關(guān)系,完善數(shù)據(jù)流轉(zhuǎn)路徑,優(yōu)化數(shù)據(jù)資源的合理分配,可視化功能的動態(tài)展示將助力企業(yè)向著智能化數(shù)據(jù)安全治理的方向轉(zhuǎn)型。工商銀行CDM應(yīng)用