敏捷數(shù)據(jù)管理平臺內(nèi)置獨有的高效壓縮存儲池,壓縮比高達3:1,存儲即壓縮,降低了基礎數(shù)據(jù)源獲取的存儲成本與持續(xù)增長的副本數(shù)據(jù)存儲成本,敏捷數(shù)據(jù)管理平臺的數(shù)據(jù)庫虛擬化技術,能夠做到只需一份基礎數(shù)據(jù)源,即可快速拉起多份虛擬數(shù)據(jù)庫作為數(shù)據(jù)副本,拉起時不占用物理存儲空間,節(jié)約了存儲成本10倍以上,通常情況下,敏捷數(shù)據(jù)管理平臺將TB量級數(shù)據(jù)庫拉起時間控制在分鐘級,響應速度快,可滿足開發(fā)測試、查詢分析、合規(guī)審計、應急恢復等場景對數(shù)據(jù)交付效率的要求。因此,敏捷數(shù)據(jù)管理平臺同時具備快速交付副本數(shù)據(jù)和節(jié)約副本數(shù)據(jù)存儲的目標,相對于傳統(tǒng)的副本數(shù)據(jù)交付,1份10TB的數(shù)據(jù)庫交付10個應用場景,則需要100TB的存儲空間,大約需要花費1個星期的時間,通過應用敏捷數(shù)據(jù)管理平臺,只需分鐘級即可同時在線交付10份10TB的副本數(shù)據(jù),而且在未產(chǎn)生新數(shù)據(jù)寫入的情況下,存儲空間相較于耗費的100TB幾乎是0占用,具體占用級別為GB級別。數(shù)據(jù)管理領域的CDM是指copy data management。資源分配
數(shù)據(jù)備份恢復當前面臨的問題與挑戰(zhàn):
(1)國產(chǎn)化數(shù)據(jù)備份系統(tǒng)兼容性不足當前國產(chǎn)化數(shù)據(jù)保護系統(tǒng)對國產(chǎn)化數(shù)據(jù)庫、文件、虛擬化平臺、容器、云服務器等備份源類型兼容未全部覆蓋,適配過程中需要更多的時間進行功能穩(wěn)定性驗證。
(2)數(shù)據(jù)備份恢復驗證耗時耗力當前采用NetBackup等集中備份系統(tǒng)備份的數(shù)據(jù)需采用手動恢復數(shù)據(jù),過程繁瑣、重復度高、專業(yè)性強,耗費大量的時間和人力成本。
(3)數(shù)據(jù)交付時間長不論是通過數(shù)據(jù)恢復還是數(shù)據(jù)拷貝來提供測試數(shù)據(jù),需要幾小時到幾周的時間。 備份數(shù)據(jù)量較大上訊敏捷數(shù)據(jù)管理平臺虛擬數(shù)據(jù)秒級分發(fā),提升了環(huán)境準備效率,數(shù)據(jù)交付時間整體節(jié)約100倍以上。
敏感數(shù)據(jù)管理是敏捷數(shù)據(jù)管理平臺功能模塊之一,主要針對敏感數(shù)據(jù)的變形處理使用,提供集敏感數(shù)據(jù)自動識別、仿真處理與數(shù)據(jù)交付為一體的敏感數(shù)據(jù)管理功能,覆蓋了敏感數(shù)據(jù)使用與管理的全部場景。針對敏感數(shù)據(jù)識別提供通用數(shù)據(jù)特征庫覆蓋個人身份信息、組織機構(gòu)信息、資質(zhì)資格證信息、金融、醫(yī)療等行業(yè)信息,包括數(shù)據(jù)內(nèi)容、字段類型、約束關系均可以實現(xiàn)自動識別,并依據(jù)類型特征加以分類;針對敏感數(shù)據(jù)的仿真處理,ADM內(nèi)置大量數(shù)據(jù)算法對敏感數(shù)據(jù)進行隨機化、模糊化、仿真度高的替換,保證處理后數(shù)據(jù)的完整性、仿真性以及數(shù)據(jù)間的關聯(lián)關系保持不變,具備靈活的數(shù)據(jù)抽取組合與自助式向?qū)舾袛?shù)據(jù)處理流程,有效降低敏感數(shù)據(jù)處理工作的復雜度。
上訊敏捷數(shù)據(jù)管理平臺ADM產(chǎn)品解決方案優(yōu)勢四針對開發(fā)測試環(huán)境測試數(shù)據(jù)的提供提出了解決方案,主要包括三個方面:
100倍數(shù)據(jù)交付效率提升
10TB的數(shù)據(jù)恢復時間由原來的小時級縮短至分鐘級。
10倍工作效率提升
在開發(fā)、測試環(huán)境中,使用者可隨時對虛擬庫做快照標記,快照對應著不同時間的數(shù)據(jù)版本。數(shù)據(jù)版本管理可進行任意標記的快照切換,降低數(shù)據(jù)導入或恢復產(chǎn)生的時間成本,大幅提升工作效率。
10倍存儲空間節(jié)省
首先內(nèi)置存儲池存儲即壓縮的機制可實現(xiàn)約3:1的數(shù)據(jù)存儲壓縮,同時交付的多個虛擬數(shù)據(jù)庫由于共享于一份原始數(shù)據(jù),因此基本不占用額外的存儲空間,隨著交付虛擬數(shù)據(jù)庫的數(shù)量增加,節(jié)約的存儲空間會成倍增加,實際應用場景中至少為用戶節(jié)約10倍的存儲空間。
上訊敏捷數(shù)據(jù)管理平臺產(chǎn)品采用數(shù)據(jù)庫虛擬化技術面向數(shù)據(jù)全生命周期進行數(shù)據(jù)安全管理。
敏感數(shù)據(jù)的仿真替換在保障數(shù)據(jù)安全的同時,也滿足了企業(yè)在數(shù)據(jù)分析、測試和開發(fā)等場景中對數(shù)據(jù)的需求。此外,上訊敏捷數(shù)據(jù)管理平臺敏感數(shù)據(jù)處理功能還提供了豐富的角色權限配置管理選項,確保不同用戶只能訪問其權限范圍內(nèi)的敏感數(shù)據(jù),進一步增強了數(shù)據(jù)的安全性。同時,系統(tǒng)支持自定義敏感數(shù)據(jù)處理規(guī)則,企業(yè)可以根據(jù)自身業(yè)務需求靈活調(diào)整敏感數(shù)據(jù)處理策略,滿足多樣化的數(shù)據(jù)處理需求。尤其針對金融、醫(yī)療行業(yè)對個人隱私數(shù)據(jù)的保護不僅要求變形替換,也要求變形后仍舊符合數(shù)據(jù)屬性要求,以便于能夠滿足數(shù)據(jù)校驗條件,滿足特定數(shù)據(jù)驗證條件符合性的使用場景。數(shù)據(jù)的備份與恢復產(chǎn)品有哪些?增量數(shù)據(jù)
敏捷數(shù)據(jù)管理平臺實現(xiàn)了對國產(chǎn)化數(shù)據(jù)庫的副本數(shù)據(jù)管理功能。資源分配
上訊敏捷數(shù)據(jù)隱私安全處理系統(tǒng)具備廣義的通用型規(guī)則,包括字符替換、隨機生成、截短、加權生成、加密等;支持保留原有數(shù)據(jù)含義的仿真型規(guī)則,支持中文字典庫與編碼字典庫,保證姓名、身份證號、證件號、地址、組織機構(gòu)代碼等處理后數(shù)據(jù)的有效性、可用性。提供基于數(shù)據(jù)庫的庫內(nèi)處理和基于ETL的抽取處理,提供文件添加水印功能,提供國產(chǎn)化操作系統(tǒng)的加密算法,滿足大數(shù)據(jù)量隱私處理任務執(zhí)行時的頁面響應速度,適用于多樣化的數(shù)據(jù)安全處理需求。資源分配