广发银行对CDM的应用场景

在典型的重复数据删除技术中，根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后，会根据输入侧不同粒度（卷级、文件级、块级）的数据采取不同的数据切分策略，并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略，当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法，通过对数据块进行哈希算法的***标记，即指纹（Fingerprint），在指纹库中寻找相同的指纹。如果存在相同指纹，则表示已保存了相同的数据块，ADM则不再保存此数据块，而是引用已存在的数据块，从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据，从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题，比较大限度地提升重删性能和重删率，为避免数据备份过程中冗余网络传输与存储开销，在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余，目的在于不备份任意一个冗余数据。数据安全领域的CDM是指副本数据管理。广发银行对CDM的应用场景

数据备份管理是上讯敏捷数据管理平台ADM功能模块之一，主要用于实现云环境、物理环境、虚拟化平台下的数据保护。包括支持各种主流平台下的系统、数据库及文件数据的保护，支持主流的虚拟化平台、国产化云服务器以及容器的保护，并可对物理服务器及虚拟化平台下的备份数据进行即时挂载恢复，提供业务应急的能力和数据快速恢复能力；针对数据备份的存储资源类型，ADM支持DAS（包括SSD/HDD）、SAN（包括IP-SAN/FC-SAN）、对象存储等存储资源。支持接入第三方云存储、对象存储等作为大容量数据存储池，具备较强的扩展能力。devops测试上讯敏捷数据管理平台ADM产品虚拟数据支持无限副本，几乎不占用额外的存储空间。

在国家大力发展信创的背景下,实现国产化软硬件部署已成为企业的**诉求,其中逐步建立覆盖国产化数据库、操作系统、虚拟化平台的国产化数据保护体系，实现备份数据自动化恢复验证成为当前数据保护系统的迫切需求。同时，以金融和运营商行业为例，其开发测试部门需要频发测试验证，对数据使用频率较高，因此形成了大量不同版本的测试数据，这部分数据体量庞大，动辄几百GB甚至几十TB，管理难度较大。国家日趋重视对数据隐私的安全管控，数据脱敏成为企业数据安全治理的重要方向。

上讯敏捷数据管理平台（ADM）既可以封装在敏捷数据管理流程的中间环节，也可以单独作为敏感数据处理的抽取平台，两种模式满足了当前用户对数据处理的全部需求。 提供系统用户角色权限的配置管理，负责系统角色用户功能的划分，操作权限的分配，负责处理任务向上级的申请，上级用户负责审批、转发、会签或驳回以及复核工作的需求。当前系统内置丰富的算法，具备广义的通用型规则，包括字符替换、随机生成、截短、加权生成、加密等；支持保留原有数据含义的仿真型规则，支持中文字典库与编码字典库，保证姓名、身份证号、证件号、地址、组织机构代码等数据的有效性、可用性，算法经优化已处理超长字符截断和重复数据的问题。通过对接第三方备份系统进行备份数据的自动化恢复校验有什么产品？

数据备份面临存储成本高的问题，ADM采用内置高效的压缩存储池存放数据，压缩比约为3:1，存储即压缩，降低了备份数据的存储成本；其次，通过ADM的数据库虚拟化技术，一份基础数据即可快速拉起多份虚拟数据库，由于虚拟数据库90%的数据均与原始数据相同，因此拉起时几乎不占用额外的物理存储空间，只对新增的写操作计入容量占用，因此，随着数据分发使用的场景和频率增加，虚拟库的数量越来越多，而存储成本将会呈倍数级节约，例如针对同一份数据创建N个虚拟库，传统方法需要N倍的存储空间占用，而通过ADM只需要占用近乎0TB的存储空间，节约了数据存储环节的资源和成本。ADM的敏感数据处理灵活性体现在异构引擎可以将大数据平台数据抽取至多类型数据库，满足输出格式多样化。防护敏感数据泄露

上讯ADM产品通过虚拟数据秒级分发功能实现测试数据的同时在线交付，缩短了数据交付的时间。广发银行对CDM的应用场景

ADM产品测试数据多副本快速交付ADM是国内**早的副本数据管理（CDM）产品，采用数据库虚拟化技术对原始数据库副本（黄金副本）快速生成多个虚拟数据库作为测试数据副本，满足开发测试场景的测试数据快速供应。Ø100倍数据交付效率提升10TB的数据恢复时间由原来的小时级缩短至分钟级；Ø10倍工作效率提升在开发、测试环境中，使用者可随时对虚拟库做快照标记，快照对应着不同时间的数据版本。数据版本管理可进行任意标记的快照切换，降低数据导入或恢复产生的时间成本，大幅提升工作效率。Ø10倍存储空间节省首先内置存储池存储即压缩的机制可实现约3:1的数据存储压缩，同时交付的多个虚拟数据库由于共享于一份原始数据，因此基本不占用额外的存储空间，随着交付虚拟数据库的数量增加，节约的存储空间会成倍增加，实际应用场景中至少为用户节约10倍的存储空间。广发银行对CDM的应用场景