2024-11-21 00:17:23
敏感數據處理是上訊敏捷數據管理平臺(ADM)產品功能模塊之一,主要針對敏感數據的處理使用,提供集敏感數據自動識別、仿真處理與數據交付為一體的敏感數據管理功能,覆蓋了敏感數據使用與管理的全部場景。針對敏感數據識別提供通用數據特征庫,敏感數據類型包括但不限于個人身份信息、組織機構信息、資質資格證信息、金融數據信息、**數據信息、車輛數據信息等眾多類別,支持全庫與子集自動掃描識別,包括數據內容、字段類型、約束關系均可以實現自動識別,并依據類型特征加以分類;針對敏感數據的仿真處理,ADM內置大量數據算法對敏感數據進行隨機化、模糊化替換,保證處理后數據的完整性、仿真性以及數據間的關聯關系保持不變,支持處理結果的校驗。上訊ADM產品通過虛擬數據秒級分發功能實現測試數據的同時在線交付,縮短了數據交付的時間。庫到文件
上訊敏捷數據管理平臺(ADM)支持重復數據刪除技術,在典型的重復數據刪除技術中,根據不同的數據備份場景選擇適合的重刪策略與粒度方案。在確定重刪策略與粒度后,會根據輸入側不同粒度(卷級、文件級、塊級)的數據采取不同的數據切分策略,并依據任務級與全局指紋庫提供自適應源端的全局重刪算法與策略,當前支持源端塊級、文件級重刪和并行重刪技術。源端重刪是采用基于內容的可變長數據切分算法,通過對數據塊進行哈希算法的標記,即指紋(Fingerprint),在指紋庫中尋找相同的指紋。如果存在相同指紋,則表示已保存了相同的數據塊,ADM則不再保存此數據塊,而是引用已存在的數據塊,從而節省更多的備份空間。該算法還可以智能識別已修改的數據和未修改的數據,從而避免因修改數據位移而導致的未修改數據切分到新數據塊中的問題,較大限度地提升重刪性能和重刪率,為避免數據備份過程中冗余網絡傳輸與存儲開銷,在源端設置粗粒度前置數據校驗可以明顯縮小備份傳輸過程中的數據冗余,目的在于不備份任意一個冗余數據。庫到文件海量數據供數于下游開發測試統計分析場景的數據使用需求該如何滿足?
數據備份管理是ADM功能模塊之一,主要用于實現云環境、物理環境、虛擬化平臺下的***數據保護。包括支持各種主流平臺下的系統、數據庫及文件數據的保護,支持主流的虛擬化平臺、國產化云服務器以及容器的保護,并可對物理服務器及虛擬化平臺下的備份數據進行即時掛載恢復,提供業務應急的能力和數據快速恢復能力;針對數據備份的存儲資源類型,ADM***支持DAS(包括SSD/HDD)、SAN(包括IP-SAN/FC-SAN)、對象存儲等存儲資源。支持接入第三方云存儲、對象存儲等作為大容量數據存儲池,具備較強的擴展能力。
《數據**法》第七條提出了**鼓勵數據依法合理有效利用,保障數據依法有序自由流動的權益,即在高度重視數據**的前提下,也要獲取數據合理利用帶來的價值,充分發揮數據作為關鍵要素的作用機制。數據的依法有序自由流動涉及數據處理的各個階段,包括數據的收集、存儲、使用、加工、傳輸、提供、公開等,各個階段構成了數據活動的全生命周期,維護數據**就是要維護數據從產生到銷毀的全生命周期各項處理活動的**性.維護數據**與促進數據開發利用是相輔相成、互相促進的關系,通過開展數據**治理能夠為數據開發利用提供**基礎保障,進而保障公民個人信息、組織的合法權益以及**的**,助力我國數字經濟發展。上訊信息敏捷數據管理平臺ADM產品的數據備份模塊通過創建虛擬副本實現了本機、異機的即時掛載恢復。
敏捷數據存儲對數據處理環節中的數據存儲部分進行了創新,采用獨特的壓縮存儲池存放備份數據,將單獨的卷管理器和文件系統角色結合在一起,由文件系統掌握磁盤的基礎結構,傳統文件系統一次只能在單個磁盤上創建,如果有兩個磁盤,則必須創建兩個單獨的文件系統,而卷管理器和文件系統的組合解決了這個問題,它允許創建許多共享可用存儲池的文件系統。該存儲池的優勢之一是對磁盤物理布局的控制,當將其他磁盤添加到池中時,現有文件系統可以自動增長,而新空間可用于所有文件系統,即可以通過添加硬盤來增大池的存儲容量,進行分區和格式化.哪個產品支持向導式的敏感數據處理流程?庫到文件
上訊ADM產品采用副本數據管理CDM面向數據全生命周期進行數據**管理。庫到文件
數據備份面臨存儲成本高的問題,ADM采用內置高效的壓縮存儲池存放數據,壓縮比約為3:1,存儲即壓縮,降低了備份數據的存儲成本;其次,通過ADM的數據庫虛擬化技術,一份基礎數據即可快速拉起多份虛擬數據庫,由于虛擬數據庫90%的數據均與原始數據相同,因此拉起時幾乎不占用額外的物理存儲空間,只對新增的寫操作計入容量占用,因此,隨著數據分發使用的場景和頻率增加,虛擬庫的數量越來越多,而存儲成本將會呈倍數級節約,例如針對同一份數據創建N個虛擬庫,傳統方法需要N倍的存儲空間占用,而通過ADM只需要占用近乎0TB的存儲空間,節約了數據存儲環節的資源和成本。庫到文件