大數(shù)據(jù)平臺敏感數(shù)據(jù)處理

在國家大力發(fā)展信創(chuàng)的背景下,實現(xiàn)國產(chǎn)化軟硬件部署已成為企業(yè)的**訴求,其中逐步建立覆蓋國產(chǎn)化數(shù)據(jù)庫、操作系統(tǒng)、虛擬化平臺的國產(chǎn)化數(shù)據(jù)保護體系，實現(xiàn)備份數(shù)據(jù)自動化恢復驗證成為當前數(shù)據(jù)保護系統(tǒng)的迫切需求。同時，以金融和運營商行業(yè)為例，其開發(fā)測試部門需要頻發(fā)測試驗證，對數(shù)據(jù)使用頻率較高，因此形成了大量不同版本的測試數(shù)據(jù)，這部分數(shù)據(jù)體量龐大，動輒幾百GB甚至幾十TB，管理難度較大。國家日趨重視對數(shù)據(jù)隱私的安全管控，數(shù)據(jù)脫敏成為企業(yè)數(shù)據(jù)安全治理的重要方向。敏捷數(shù)據(jù)管理平臺 ADM是采用數(shù)據(jù)庫虛擬化等核*技術面向數(shù)據(jù)全生命周期的數(shù)據(jù)安全管理產(chǎn)品。大數(shù)據(jù)平臺敏感數(shù)據(jù)處理

在數(shù)據(jù)收集和使用上，通過獲取一份具有應用一致性保證的“黃金副本”，分鐘級虛擬化為多個副本直接掛載使用，數(shù)據(jù)使用效率明顯得到提升；在數(shù)據(jù)存儲和傳輸上，這些虛擬數(shù)據(jù)副本相對原始存儲幾乎不占用存儲空間（約為0），且ADM產(chǎn)品將全部數(shù)據(jù)集中存放在統(tǒng)一的存儲池中，既保證了數(shù)據(jù)傳輸流轉(zhuǎn)的閉環(huán)管控，又降低了數(shù)據(jù)的存儲成本；在數(shù)據(jù)加工上，數(shù)據(jù)脫離生產(chǎn)環(huán)境之前增設了敏感數(shù)據(jù)處理環(huán)節(jié)，保障數(shù)據(jù)公開后的隱私安全，防止核心數(shù)據(jù)泄露；在數(shù)據(jù)的提供和公開上，虛擬數(shù)據(jù)副本可用于準生產(chǎn)、測試環(huán)境等場景的數(shù)據(jù)交付，每一份虛擬數(shù)據(jù)都是互不影響的，并且可讀可寫，數(shù)據(jù)在經(jīng)過變更后可標記快照，多個快照之間可以任意切換實現(xiàn)數(shù)據(jù)版本的管理。大數(shù)據(jù)平臺敏感數(shù)據(jù)處理ADM數(shù)據(jù)閉環(huán)式流轉(zhuǎn)與安全管控，保證了全生命周期數(shù)據(jù)資產(chǎn)管理。

敏捷數(shù)據(jù)管理平臺備份數(shù)據(jù)有效性驗證場景及價值：場景：備份數(shù)據(jù)是數(shù)據(jù)安全一道防線，大部分用戶在生產(chǎn)網(wǎng)絡中已部署了如NBU、Commvault等常見備份系統(tǒng)，為了保證備份數(shù)據(jù)的可恢復性及可用性，需要經(jīng)常對備份數(shù)據(jù)做恢復校驗，而手動恢復校驗比較耗時耗力，因此導致了做備份數(shù)據(jù)恢復校驗的頻率不夠。價值：采用ADM實現(xiàn)備份數(shù)據(jù)的恢復校驗，可以將NBU、Commvault等備份系統(tǒng)的備份策略導入到ADM平臺中，并根據(jù)備份策略創(chuàng)建不同的恢復任務，且恢復任務可以進行恢復排期，幫助用戶實現(xiàn)自動化的周期性的備份數(shù)據(jù)恢復校驗，節(jié)約了大量的人力成本，且增加了備份數(shù)據(jù)恢復的頻率，為備份數(shù)據(jù)的可恢復性可用性提供了更好的保障。

敏捷數(shù)據(jù)管理平臺（Agile Data Management）簡稱ADM，是采用基于CDM（副本數(shù)據(jù)管理）的數(shù)據(jù)庫虛擬化技術，為企業(yè)上中下游數(shù)據(jù)的備份恢復、數(shù)據(jù)驗證、敏感數(shù)據(jù)處理、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案，在保證數(shù)據(jù)安全使用的同時，提高了數(shù)據(jù)使用效率并降低了數(shù)據(jù)存儲成本。ADM由數(shù)據(jù)備份管理、備份校驗管理、數(shù)據(jù)副本管理、敏感數(shù)據(jù)處理管理組成，實現(xiàn)了數(shù)據(jù)復制容災、數(shù)據(jù)存儲管理和數(shù)據(jù)流程管理，通過自動化流程任務編排的方式實現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用，充分發(fā)揮了數(shù)據(jù)資產(chǎn)的潛在價值。ADM支持多線程文件備份，支持海量小文件場景下的聚合策略進行文件備份。

上訊敏捷數(shù)據(jù)管理平臺ADM對接用戶現(xiàn)有集中式備份系統(tǒng)服務器，實現(xiàn)恢復服務器、數(shù)據(jù)恢復策略、數(shù)據(jù)驗證策略和存儲資源的集中管理，包括：（1）存儲池自動準備存儲空間、自動調(diào)度創(chuàng)建恢復服務器；（2）按照參數(shù)設置恢復策略、自動執(zhí)行恢復計劃、自動驗證恢復數(shù)據(jù)；（3）恢復驗證任務結(jié)束后，自動清理恢復環(huán)境，釋放存儲資源和恢復服務器資源，用于下一個恢復驗證任務的使用，使整個數(shù)據(jù)備份恢復驗證工作能夠高效節(jié)能地循環(huán)利用，達到集中統(tǒng)一的安全管理。ADM可使數(shù)據(jù)分鐘級提供，提升數(shù)據(jù)交付效率縮短開發(fā)周期。kafka地址

目前，ADM備份數(shù)據(jù)恢復驗證管理功能實現(xiàn)了按計劃設定備份恢復任務并自動執(zhí)行，無需手動操作。大數(shù)據(jù)平臺敏感數(shù)據(jù)處理

上訊信息敏捷數(shù)據(jù)管理平臺的備份數(shù)據(jù)管理模塊，突破了傳統(tǒng)備份理念，基于特有的CDM數(shù)據(jù)庫虛擬化技術，不僅可以實現(xiàn)對數(shù)據(jù)庫的實時性持續(xù)備份以及本機、異機的快速恢復，還可以同時對備份數(shù)據(jù)的有效性進行驗證。對于已經(jīng)部署了NBU/CommVault等備份系統(tǒng)的用戶，可以對接備份系統(tǒng)，實現(xiàn)存儲空間、恢復服務器和恢復任務的自動調(diào)度，從而實現(xiàn)備份數(shù)據(jù)有效性驗證的全自動化，并根據(jù)驗證結(jié)果生成詳細的恢復驗證報告。在恢復驗證任務結(jié)束后，自動清理恢復環(huán)境，釋放存儲資源和恢復服務器資源，以用于下一個恢復驗證任務的使用，使整個數(shù)據(jù)備份恢復驗證工作能夠周期性地循環(huán)運轉(zhuǎn).大數(shù)據(jù)平臺敏感數(shù)據(jù)處理