敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM(副本數(shù)據(jù)管理)的數(shù)據(jù)庫虛擬化技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗證、敏感數(shù)據(jù)處理、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案,在保證數(shù)據(jù)安全使用的同時,提高了數(shù)據(jù)使用效率并降低了數(shù)據(jù)存儲成本。ADM由數(shù)據(jù)備份管理、備份校驗管理、數(shù)據(jù)副本管理、敏感數(shù)據(jù)處理管理組成,實現(xiàn)了數(shù)據(jù)復(fù)制容災(zāi)、數(shù)據(jù)存儲管理和數(shù)據(jù)流程管理,通過自動化流程任務(wù)編排的方式實現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了數(shù)據(jù)資產(chǎn)的潛在價值。哪個產(chǎn)品支持向?qū)降拿舾袛?shù)據(jù)處理流程?招商銀行使用哪家的CDM
數(shù)據(jù)分鐘級提供,提升數(shù)據(jù)交付效率縮短開發(fā)周期通過部署ADM幾分鐘內(nèi)即可創(chuàng)建一個數(shù)據(jù)量TB級別的虛擬數(shù)據(jù)庫,進而,快速將測試數(shù)據(jù)傳輸?shù)较掠蔚拈_發(fā)測試環(huán)境,無需繁瑣冗長的審核和等待,這一過程有效減少了下游開發(fā)測試場景中測試數(shù)據(jù)的準備時間,通常從以天計算縮短到以小時計算,時間效率提升明顯,**縮短了開發(fā)測試時間,進而縮短產(chǎn)品的發(fā)布周期。(5)敏感數(shù)據(jù)定義識別與仿真***,保障數(shù)據(jù)流轉(zhuǎn)環(huán)節(jié)的安全性通過智能定義敏感數(shù)據(jù)類型,自動發(fā)現(xiàn)和識別敏感數(shù)據(jù),包括數(shù)據(jù)類型、內(nèi)容、約束關(guān)系,靈活排序減少人為篩選,***精細定位敏感數(shù)據(jù)源。豐富的***算法與仿真的字典庫相結(jié)合,保證***后數(shù)據(jù)仍具有業(yè)務(wù)屬性,數(shù)據(jù)表間關(guān)系仍具有業(yè)務(wù)一致性,不影響數(shù)據(jù)挖掘分析數(shù)據(jù)價值。對涉及企業(yè)、個人信息的隱私數(shù)據(jù),包括資金財產(chǎn)、個人、企業(yè)隱私的對照關(guān)系進行敏感數(shù)據(jù)識別,通過內(nèi)置的***規(guī)則進行***處理,將數(shù)據(jù)敏感部分去隱私化,但并不失去數(shù)據(jù)挖掘的價值特征,減少數(shù)據(jù)隱私泄露帶來的風(fēng)險和損失,甚至降低可能發(fā)生的人身傷害和違法犯罪事件。數(shù)據(jù)數(shù)量完整信息敏捷數(shù)據(jù)管理平臺ADM包括生產(chǎn)數(shù)據(jù)備份、備份恢復(fù)校驗、敏感數(shù)據(jù)處理、數(shù)據(jù)副本管理四大功能模塊。
上訊信息敏捷數(shù)據(jù)管理平臺的備份數(shù)據(jù)管理模塊,突破了傳統(tǒng)備份理念,基于特有的CDM數(shù)據(jù)庫虛擬化技術(shù),不僅可以實現(xiàn)對數(shù)據(jù)庫的實時性持續(xù)備份以及本機、異機的快速恢復(fù),還可以同時對備份數(shù)據(jù)的有效性進行驗證。對于已經(jīng)部署了NBU/CommVault等備份系統(tǒng)的用戶,可以對接備份系統(tǒng),實現(xiàn)存儲空間、恢復(fù)服務(wù)器和恢復(fù)任務(wù)的自動調(diào)度,從而實現(xiàn)備份數(shù)據(jù)有效性驗證的全自動化,并根據(jù)驗證結(jié)果生成詳細的恢復(fù)驗證報告。在恢復(fù)驗證任務(wù)結(jié)束后,自動清理恢復(fù)環(huán)境,釋放存儲資源和恢復(fù)服務(wù)器資源,以用于下一個恢復(fù)驗證任務(wù)的使用,使整個數(shù)據(jù)備份恢復(fù)驗證工作能夠周期性地循環(huán)運轉(zhuǎn).
上訊敏捷數(shù)據(jù)管理平臺ADM對接用戶現(xiàn)有集中式備份系統(tǒng)服務(wù)器,實現(xiàn)恢復(fù)服務(wù)器、數(shù)據(jù)恢復(fù)策略、數(shù)據(jù)驗證策略和存儲資源的集中管理,包括:(1)存儲池自動準備存儲空間、自動調(diào)度創(chuàng)建恢復(fù)服務(wù)器;(2)按照參數(shù)設(shè)置恢復(fù)策略、自動執(zhí)行恢復(fù)計劃、自動驗證恢復(fù)數(shù)據(jù);(3)恢復(fù)驗證任務(wù)結(jié)束后,自動清理恢復(fù)環(huán)境,釋放存儲資源和恢復(fù)服務(wù)器資源,用于下一個恢復(fù)驗證任務(wù)的使用,使整個數(shù)據(jù)備份恢復(fù)驗證工作能夠高效節(jié)能地循環(huán)利用,達到集中統(tǒng)一安全管理。上訊ADM產(chǎn)品的可管理性體現(xiàn)在數(shù)據(jù)從上游到下游獲取、傳輸、流轉(zhuǎn)的集中式管理,同時可進行版本管理。
上訊敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM架構(gòu)的數(shù)據(jù)庫虛擬化等**技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗證、安全***、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案。該產(chǎn)品通過自動化流程任務(wù)編排的方式實現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,充分發(fā)揮了備份數(shù)據(jù)的潛在價值。實現(xiàn)生產(chǎn)數(shù)據(jù)備份恢復(fù)與異地容災(zāi)、備份數(shù)據(jù)自動化恢復(fù)與有效性驗證、測試數(shù)據(jù)多副本快速交付、數(shù)據(jù)安全***。
上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品支持仿真的敏感數(shù)據(jù)處理。下游測試數(shù)據(jù)快速交付
國內(nèi)較早發(fā)布CDM領(lǐng)域的平臺型產(chǎn)品是上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品。招商銀行使用哪家的CDM
上訊敏捷數(shù)據(jù)管理平臺(ADM)支持重復(fù)數(shù)據(jù)刪除技術(shù),在典型的重復(fù)數(shù)據(jù)刪除技術(shù)中,根據(jù)不同的數(shù)據(jù)備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據(jù)輸入側(cè)不同粒度(卷級、文件級、塊級)的數(shù)據(jù)采取不同的數(shù)據(jù)切分策略,并依據(jù)任務(wù)級與全局指紋庫提供自適應(yīng)源端的全局重刪算法與策略,當前支持源端塊級、文件級重刪和并行重刪技術(shù)。源端重刪是采用基于內(nèi)容的可變長數(shù)據(jù)切分算法,通過對數(shù)據(jù)塊進行哈希算法的標記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數(shù)據(jù)塊,ADM則不再保存此數(shù)據(jù)塊,而是引用已存在的數(shù)據(jù)塊,從而節(jié)省更多的備份空間。該算法還可以智能識別已修改的數(shù)據(jù)和未修改的數(shù)據(jù),從而避免因修改數(shù)據(jù)位移而導(dǎo)致的未修改數(shù)據(jù)切分到新數(shù)據(jù)塊中的問題,較大限度地提升重刪性能和重刪率,為避免數(shù)據(jù)備份過程中冗余網(wǎng)絡(luò)傳輸與存儲開銷,在源端設(shè)置粗粒度前置數(shù)據(jù)校驗可以明顯縮小備份傳輸過程中的數(shù)據(jù)冗余,目的在于不備份任意一個冗余數(shù)據(jù)。招商銀行使用哪家的CDM