ADM通過對管理人員、測試需求等內(nèi)容的不同進行分組劃分,將已經(jīng)數(shù)據(jù)進行分組管理,從測試數(shù)據(jù)管理的源頭管控數(shù)據(jù)資源的類別,做到從源頭劃分類別,使測試數(shù)據(jù)管理形成數(shù)據(jù)源----數(shù)據(jù)中轉(zhuǎn)----數(shù)據(jù)目標(biāo)的閉環(huán)式數(shù)據(jù)使用流程,規(guī)范化的數(shù)據(jù)流程使數(shù)據(jù)管理者成為數(shù)據(jù)的負(fù)責(zé)人,自動化的資源管理也更有效地為用戶提供安全的測試數(shù)據(jù)管理方案。敏捷數(shù)據(jù)管理平臺ADM提供對虛擬數(shù)據(jù)庫的樹狀拓?fù)浣Y(jié)構(gòu)圖,可詳細(xì)了解測試數(shù)據(jù)的來源、所屬存儲池、掛載的測試服務(wù)器,以及虛擬數(shù)據(jù)庫快照的上下級關(guān)系,方便對系統(tǒng)全局的數(shù)據(jù)使用結(jié)構(gòu)進行預(yù)覽,幫助用戶了解測試網(wǎng)中測試數(shù)據(jù)的使用關(guān)系,完善測試數(shù)據(jù)的組織結(jié)構(gòu),優(yōu)化測試數(shù)據(jù)的資源分配。敏捷數(shù)據(jù)管理平臺內(nèi)置豐富的仿真敏感數(shù)據(jù)處理算法。虛擬數(shù)據(jù)庫
敏捷數(shù)據(jù)管理平臺(Agile Data Management)簡稱ADM,是采用基于CDM(副本數(shù)據(jù)管理)的數(shù)據(jù)庫虛擬化技術(shù),為企業(yè)上中下游數(shù)據(jù)的備份恢復(fù)、數(shù)據(jù)驗證、敏感數(shù)據(jù)處理、分發(fā)交付提供的面向數(shù)據(jù)全生命周期的安全管理解決方案,在保證數(shù)據(jù)安全使用的同時,提高了數(shù)據(jù)使用效率并降低了數(shù)據(jù)存儲成本。ADM由數(shù)據(jù)備份管理、備份校驗管理、數(shù)據(jù)副本管理、敏感數(shù)據(jù)處理管理組成,實現(xiàn)了數(shù)據(jù)復(fù)制容災(zāi)、數(shù)據(jù)存儲管理和數(shù)據(jù)流程管理,通過自動化流程任務(wù)編排的方式實現(xiàn)了數(shù)據(jù)使用的成本控制、版本管理與開發(fā)利用,能夠充分發(fā)揮了數(shù)據(jù)資產(chǎn)的潛在價值。回歸測試敏捷數(shù)據(jù)管理平臺對恢復(fù)資源進行統(tǒng)一集中化調(diào)度,自動化完成數(shù)據(jù)恢復(fù)任務(wù)。
上訊敏捷數(shù)據(jù)管理平臺(ADM)數(shù)據(jù)異地容災(zāi)主要解決本地數(shù)據(jù)同步到異地,實現(xiàn)異地數(shù)據(jù)保護的目標(biāo)。通過制定容災(zāi)策略將本地ADM中的數(shù)據(jù)同步到異地ADM中,容災(zāi)的數(shù)據(jù)類型包括存儲池中的全部備份數(shù)據(jù)和虛擬副本數(shù)據(jù),容災(zāi)類型支持實時容災(zāi)和定時容災(zāi),根據(jù)生產(chǎn)數(shù)據(jù)的容災(zāi)需求制定合理的容災(zāi)策略,保證為生產(chǎn)數(shù)據(jù)提供雙重保護。當(dāng)本地生產(chǎn)數(shù)據(jù)或備份數(shù)據(jù)丟失、損壞時,立即啟用容災(zāi)端接管業(yè)務(wù),備份策略自動注冊到容災(zāi)端管理控制中心(Master),自動接管備份任務(wù),保證備份任務(wù)的持續(xù)不間斷運行。
上訊敏捷數(shù)據(jù)管理平臺主要通過數(shù)據(jù)副本管理的自主研發(fā)技術(shù)——數(shù)據(jù)庫虛擬化技術(shù),對源數(shù)據(jù)進行原格式獲取生成黃金副本,存儲黃金副本作為基準(zhǔn)數(shù)據(jù),并虛擬化為多個副本掛載恢復(fù),達到快速交付副本數(shù)據(jù)、靈活管理副本數(shù)據(jù)版本、集中管理副本數(shù)據(jù)存儲與流轉(zhuǎn)的目標(biāo),上訊敏捷數(shù)據(jù)管理平臺是主要面向企業(yè)數(shù)據(jù)運維、軟件開發(fā)測試部門解決自動化閉環(huán)取數(shù)供數(shù)、測試數(shù)據(jù)快速交付等典型應(yīng)用場景的產(chǎn)品。主要的應(yīng)用場景在于金融行業(yè)開發(fā)測試環(huán)境測試數(shù)據(jù)的敏捷供應(yīng),在取數(shù)供數(shù)方面可以有效彌補Devops業(yè)務(wù)敏捷化之后數(shù)據(jù)供應(yīng)慢的短板,幫助測試數(shù)據(jù)快速、高效地更新,以適應(yīng)不斷更新的測試版本。副本數(shù)據(jù)管理技術(shù)是通過獲取一份基礎(chǔ)數(shù)據(jù)源,快速拉起多份虛擬數(shù)據(jù)庫掛載給目標(biāo)業(yè)務(wù)使用。
備份校驗管理是敏捷數(shù)據(jù)管理平臺功能模塊之一,主要用于對備份數(shù)據(jù)進行自動化的恢復(fù)校驗,保證備份數(shù)據(jù)的可恢復(fù)性、完整性。通過對接備份系統(tǒng)(如NetBackup、Commvault、NetWorker等)集中管理存儲資源、恢復(fù)服務(wù)器資源和恢復(fù)任務(wù),實現(xiàn)存儲空間、恢復(fù)服務(wù)器和恢復(fù)任務(wù)的自動調(diào)度,從而完成備份數(shù)據(jù)有效性驗證的全自動化。備份校驗管理可以滿足用戶對當(dāng)前備份數(shù)據(jù)的可恢復(fù)性驗證、恢復(fù)后的完整性驗證兩方面的需求,能夠覆蓋用戶現(xiàn)有全部業(yè)務(wù)系統(tǒng)的備份數(shù)據(jù),包括備份集和備份文件,實現(xiàn)跨操作系統(tǒng)平臺UtoL的數(shù)據(jù)恢復(fù)(如AIX到Linux),達到驗證工作的高覆蓋率,提高有效性驗證的頻率。敏捷數(shù)據(jù)管理平臺是純國產(chǎn)化的CDM產(chǎn)品。數(shù)據(jù)獲取方式
敏捷數(shù)據(jù)管理平臺具備廣義的通用型敏感數(shù)據(jù)處理規(guī)則,包括字符替換、隨機生成、截短、加權(quán)生成、加密等。虛擬數(shù)據(jù)庫
上訊敏捷數(shù)據(jù)管理平臺(ADM)支持并行重刪技術(shù),通過在多個不同的節(jié)點上構(gòu)建指紋庫,并將指紋并行分布于多個節(jié)點,采用內(nèi)存級指紋庫進行重刪,所有指紋讀寫全部保存于內(nèi)存中,從而提升指紋查詢和處理效率,并且減少了因磁盤中指紋庫增大所導(dǎo)致的隨機IO壓力。以此識別并消除數(shù)據(jù)備份過程中數(shù)據(jù)源中重復(fù)的數(shù)據(jù),該技術(shù)適用于不同平臺中的文件、數(shù)據(jù)庫、虛擬機等不同應(yīng)用類型的數(shù)據(jù),可以大幅度減少需要傳輸?shù)臄?shù)據(jù)量,從而極大地節(jié)省數(shù)據(jù)傳輸帶寬,解決單點性能和存儲空間壓力。虛擬數(shù)據(jù)庫