测试数据快速交付最佳实践

并行重删技术是在多个不同的节点上构建指纹库，并将指纹并行分布于多个节点，采用内存级指纹库进行重删，所有指纹读写全部保存于内存中，从而提升指纹查询和处理效率，并且减少了因磁盘中指纹库增大所导致的随机IO压力。以此识别并消除数据备份过程中数据源中重复的数据，该技术适用于不同平台中的文件、数据库、虚拟机等不同应用类型的数据，可以大幅度减少需要传输的数据量，从而极大地节省数据传输带宽，解决单点性能和存储空间压力。上讯信息敏捷数据管理平台ADM产品支持全域重删技术，重删指纹库重建功能。测试数据快速交付最佳实践

通过部署敏捷数据管理平台ADM产品的数据副本管理模块，实现了测试数据版本迭代管理，提升了数据使用过程中的应用效率。随着移动互联网技术的不断革新，移动应用业务不断扩张，企业面临着前台业务频繁更新升级的现状，为保证既有业务稳定，需要对新提出的升级需求开展仿真测试与回归测试，因此亟需一套能够对测试环境的测试数据进行版本灵活切换的解决方案，便于测试数据版本的即时调用，迅速适应不同业务程序提供不同版本的测试数据。ADM的虚拟数据库快照功能解决了这一问题，通过对数据库状态进行定时或即时的记录，管理和维护当前虚拟数据库的数据，使用人员可以随时通过记录的虚拟数据库快照提供一个版本的测试数据，经过测试后保存当前的数据库使用状态，便于开发测试的数据版本迭代，通过这一功能明显提升了程序升级测试、版本迭代的效率.数据被窃取上讯信息敏捷数据管理平台ADM是创新型数据备份管理解决方案。

敏捷数据管理平台ADM的关键技术如下：l***数据获取方式数据获取的目的是将不同的数据源实时或者按需同步到平台内，根据不同类型的数据源，数据获取方式分为三种，保证覆盖全部数据源获取方式：①支持实时同步应用数据库；②支持按需同步关系型数据库；③支持与备份系统对接恢复数据。l核心专利技术—数据库虚拟化技术ADM内置一套数据库虚拟化管理程序，虚拟数据库是通过一份基础数据源创建的数据副本，一份基础数据源可以生成多个虚拟数据库，虚拟数据库可读可写，虚拟数据库状态可实时保存。虚拟数据库创建时间为分钟级，且不占用额外的存储空间。

数据流程管理是ADM功能模块之一，主要通过灵活配置数据流转环节实现数据管理流程的自动化作业编排，ADM采用基于画布的方式默认作业流程的起止节点，根据实际需求将数据的获取、恢复、传输、共享、交付、销毁等各个环节对应的任务组件灵活拖动到作业画布，组成一个完整的任务流程，各任务之间支持依赖关系、延时机制以及断点处理机制，实现数据管理流程任务的串联组建和并行执行，达到数据管理流程的自动化执行，协助用户将数据交付流程的各个工作环节灵活地组合起来，实现数据交付的自动化，从而摆脱人工值守，达到缩减时间成本和人力成本的目标。备份数据的开发利用是唤醒大量沦为暗数据的备份数据，让数据备份即可用。

敏捷数据存储对数据处理环节中的数据存储部分进行了创新，采用独特的压缩存储池存放备份数据，将单独的卷管理器和文件系统角色结合在一起，由文件系统掌握磁盘的基础结构，传统文件系统一次只能在单个磁盘上创建，如果有两个磁盘，则必须创建两个单独的文件系统，而卷管理器和文件系统的组合解决了这个问题，它允许创建许多共享可用存储池的文件系统。该存储池的优势之一是对磁盘物理布局的控制，当将其他磁盘添加到池中时，现有文件系统可以自动增长，而新空间可用于所有文件系统，即可以通过添加硬盘来增大池的存储容量，进行分区和格式化.数据备份产品构建了数据保护的基础防线。数据模糊化变形

国内较早发布CDM领域的平台型产品是上讯敏捷数据管理平台ADM产品。测试数据快速交付最佳实践

数据备份面临存储成本高的问题，ADM采用内置高效的压缩存储池存放数据，压缩比约为3:1，存储即压缩，降低了备份数据的存储成本；其次，通过ADM的数据库虚拟化技术，一份基础数据即可快速拉起多份虚拟数据库，由于虚拟数据库90%的数据均与原始数据相同，因此拉起时几乎不占用额外的物理存储空间，只对新增的写操作计入容量占用，因此，随着数据分发使用的场景和频率增加，虚拟库的数量越来越多，而存储成本将会呈倍数级节约，例如针对同一份数据创建N个虚拟库，传统方法需要N倍的存储空间占用，而通过ADM只需要占用近乎0TB的存储空间，节约了数据存储环节的资源和成本。测试数据快速交付最佳实践