敏捷數(shù)據(jù)管理平臺內(nèi)置獨有的高效壓縮存儲池,壓縮比高達(dá)3:1,存儲即壓縮,降低了基礎(chǔ)數(shù)據(jù)源獲取的存儲成本與持續(xù)增長的副本數(shù)據(jù)存儲成本,敏捷數(shù)據(jù)管理平臺的數(shù)據(jù)庫虛擬化技術(shù),能夠做到只需一份基礎(chǔ)數(shù)據(jù)源,即可快速拉起多份虛擬數(shù)據(jù)庫作為數(shù)據(jù)副本,拉起時不占用物理存儲空間,節(jié)約了存儲成本10倍以上,通常情況下,敏捷數(shù)據(jù)管理平臺將TB量級數(shù)據(jù)庫拉起時間控制在分鐘級,響應(yīng)速度快,可滿足開發(fā)測試、查詢分析、合規(guī)審計、應(yīng)急恢復(fù)等場景對數(shù)據(jù)交付效率的要求。因此,敏捷數(shù)據(jù)管理平臺同時具備快速交付副本數(shù)據(jù)和節(jié)約副本數(shù)據(jù)存儲的目標(biāo),相對于傳統(tǒng)的副本數(shù)據(jù)交付,1份10TB的數(shù)據(jù)庫交付10個應(yīng)用場景,則需要100TB的存儲空間,大約需要花費1個星期的時間,通過應(yīng)用敏捷數(shù)據(jù)管理平臺,只需分鐘級即可同時在線交付10份10TB的副本數(shù)據(jù),而且在未產(chǎn)生新數(shù)據(jù)寫入的情況下,存儲空間相較于耗費的100TB幾乎是0占用,具體占用級別為GB級別。數(shù)據(jù)管理領(lǐng)域的CDM是指copy data management。資源分配
數(shù)據(jù)備份恢復(fù)當(dāng)前面臨的問題與挑戰(zhàn):
(1)國產(chǎn)化數(shù)據(jù)備份系統(tǒng)兼容性不足當(dāng)前國產(chǎn)化數(shù)據(jù)保護(hù)系統(tǒng)對國產(chǎn)化數(shù)據(jù)庫、文件、虛擬化平臺、容器、云服務(wù)器等備份源類型兼容未全部覆蓋,適配過程中需要更多的時間進(jìn)行功能穩(wěn)定性驗證。
(2)數(shù)據(jù)備份恢復(fù)驗證耗時耗力當(dāng)前采用NetBackup等集中備份系統(tǒng)備份的數(shù)據(jù)需采用手動恢復(fù)數(shù)據(jù),過程繁瑣、重復(fù)度高、專業(yè)性強(qiáng),耗費大量的時間和人力成本。
(3)數(shù)據(jù)交付時間長不論是通過數(shù)據(jù)恢復(fù)還是數(shù)據(jù)拷貝來提供測試數(shù)據(jù),需要幾小時到幾周的時間。 備份數(shù)據(jù)量較大上訊敏捷數(shù)據(jù)管理平臺虛擬數(shù)據(jù)秒級分發(fā),提升了環(huán)境準(zhǔn)備效率,數(shù)據(jù)交付時間整體節(jié)約100倍以上。
敏感數(shù)據(jù)管理是敏捷數(shù)據(jù)管理平臺功能模塊之一,主要針對敏感數(shù)據(jù)的變形處理使用,提供集敏感數(shù)據(jù)自動識別、仿真處理與數(shù)據(jù)交付為一體的敏感數(shù)據(jù)管理功能,覆蓋了敏感數(shù)據(jù)使用與管理的全部場景。針對敏感數(shù)據(jù)識別提供通用數(shù)據(jù)特征庫覆蓋個人身份信息、組織機(jī)構(gòu)信息、資質(zhì)資格證信息、金融、醫(yī)療等行業(yè)信息,包括數(shù)據(jù)內(nèi)容、字段類型、約束關(guān)系均可以實現(xiàn)自動識別,并依據(jù)類型特征加以分類;針對敏感數(shù)據(jù)的仿真處理,ADM內(nèi)置大量數(shù)據(jù)算法對敏感數(shù)據(jù)進(jìn)行隨機(jī)化、模糊化、仿真度高的替換,保證處理后數(shù)據(jù)的完整性、仿真性以及數(shù)據(jù)間的關(guān)聯(lián)關(guān)系保持不變,具備靈活的數(shù)據(jù)抽取組合與自助式向?qū)舾袛?shù)據(jù)處理流程,有效降低敏感數(shù)據(jù)處理工作的復(fù)雜度。
上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品解決方案優(yōu)勢四針對開發(fā)測試環(huán)境測試數(shù)據(jù)的提供提出了解決方案,主要包括三個方面:
100倍數(shù)據(jù)交付效率提升
10TB的數(shù)據(jù)恢復(fù)時間由原來的小時級縮短至分鐘級。
10倍工作效率提升
在開發(fā)、測試環(huán)境中,使用者可隨時對虛擬庫做快照標(biāo)記,快照對應(yīng)著不同時間的數(shù)據(jù)版本。數(shù)據(jù)版本管理可進(jìn)行任意標(biāo)記的快照切換,降低數(shù)據(jù)導(dǎo)入或恢復(fù)產(chǎn)生的時間成本,大幅提升工作效率。
10倍存儲空間節(jié)省
首先內(nèi)置存儲池存儲即壓縮的機(jī)制可實現(xiàn)約3:1的數(shù)據(jù)存儲壓縮,同時交付的多個虛擬數(shù)據(jù)庫由于共享于一份原始數(shù)據(jù),因此基本不占用額外的存儲空間,隨著交付虛擬數(shù)據(jù)庫的數(shù)量增加,節(jié)約的存儲空間會成倍增加,實際應(yīng)用場景中至少為用戶節(jié)約10倍的存儲空間。
上訊敏捷數(shù)據(jù)管理平臺產(chǎn)品采用數(shù)據(jù)庫虛擬化技術(shù)面向數(shù)據(jù)全生命周期進(jìn)行數(shù)據(jù)安全管理。
敏感數(shù)據(jù)的仿真替換在保障數(shù)據(jù)安全的同時,也滿足了企業(yè)在數(shù)據(jù)分析、測試和開發(fā)等場景中對數(shù)據(jù)的需求。此外,上訊敏捷數(shù)據(jù)管理平臺敏感數(shù)據(jù)處理功能還提供了豐富的角色權(quán)限配置管理選項,確保不同用戶只能訪問其權(quán)限范圍內(nèi)的敏感數(shù)據(jù),進(jìn)一步增強(qiáng)了數(shù)據(jù)的安全性。同時,系統(tǒng)支持自定義敏感數(shù)據(jù)處理規(guī)則,企業(yè)可以根據(jù)自身業(yè)務(wù)需求靈活調(diào)整敏感數(shù)據(jù)處理策略,滿足多樣化的數(shù)據(jù)處理需求。尤其針對金融、醫(yī)療行業(yè)對個人隱私數(shù)據(jù)的保護(hù)不僅要求變形替換,也要求變形后仍舊符合數(shù)據(jù)屬性要求,以便于能夠滿足數(shù)據(jù)校驗條件,滿足特定數(shù)據(jù)驗證條件符合性的使用場景。數(shù)據(jù)的備份與恢復(fù)產(chǎn)品有哪些?增量數(shù)據(jù)
敏捷數(shù)據(jù)管理平臺實現(xiàn)了對國產(chǎn)化數(shù)據(jù)庫的副本數(shù)據(jù)管理功能。資源分配
上訊敏捷數(shù)據(jù)隱私安全處理系統(tǒng)具備廣義的通用型規(guī)則,包括字符替換、隨機(jī)生成、截短、加權(quán)生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號、證件號、地址、組織機(jī)構(gòu)代碼等處理后數(shù)據(jù)的有效性、可用性。提供基于數(shù)據(jù)庫的庫內(nèi)處理和基于ETL的抽取處理,提供文件添加水印功能,提供國產(chǎn)化操作系統(tǒng)的加密算法,滿足大數(shù)據(jù)量隱私處理任務(wù)執(zhí)行時的頁面響應(yīng)速度,適用于多樣化的數(shù)據(jù)安全處理需求。資源分配