数据流程管理是ADM功能模块之一,主要通过灵活配置数据流转环节实现数据管理流程的自动化作业编排,ADM采用基于画布的方式默认作业流程的起止节点,根据实际需求将数据的获取、恢复、传输、共享、交付、销毁等各个环节对应的任务组件灵活拖动到作业画布,组成一个完整的任务流程,各任务之间支持依赖关系、延时机制以及断点处理机制,实现数据管理流程任务的串联组建和并行执行,达到数据管理流程的自动化执行,协助用户将数据交付流程的各个工作环节灵活地组合起来,实现数据交付的自动化,从而摆脱人工值守,达到缩减时间成本和人力成本的目标。数据安全领域的CDM是指拷贝数据管理。云虚拟机
上讯敏捷数据管理平台(ADM)支持增量备份与全量快照合成技术,传统的备份方案大多采用周期性的“全量备份+增量备份”策略,其增量备份大多不可持续,经过一段时间就必须执行一次全量备份。因而传统的备份方案经常面临备份窗口过大的问题,而且其增量备份数据的恢复效率相对低下,因为每个时间点的恢复都依赖于上一次全备副本和上一次全备副本后的所有增量数据,恢复操作需要进行逐个迭代恢复。此外,过期增量数据的清理操作也受限于备份副本之间的依赖关系,不一定能及时被清理。而增量备份与全量快照合成技术,即首先执行全量备份,之后只对新增或改动过的数据进行增量备份,此增量备份数据是持续的,而且每个增量备份的数据副本将自动合成为全量快照副本,便于恢复。因此,增量备份与全量快照合成技术能够大幅度减少备份时间,节省备份数据所需的存储空间,且提升了恢复效率。数据副本管理上讯ADM产品通过虚拟数据秒级分发功能实现测试数据的同时在线交付,缩短了数据交付的时间。
上讯敏捷数据管理平台(ADM)支持重复数据删除技术,在典型的重复数据删除技术中,根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后,会根据输入侧不同粒度(卷级、文件级、块级)的数据采取不同的数据切分策略,并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略,当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法,通过对数据块进行哈希算法的标记,即指纹(Fingerprint),在指纹库中寻找相同的指纹。如果存在相同指纹,则表示已保存了相同的数据块,ADM则不再保存此数据块,而是引用已存在的数据块,从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据,从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题,较大限度地提升重删性能和重删率,为避免数据备份过程中冗余网络传输与存储开销,在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余,目的在于不备份任意一个冗余数据。
用户提出数据管理产品的上线既要满足云技术的部署带来数据迁移和历史备份数据接管的要求,又要对用户系统更新迭代导致副本数据使用管理需求增加、测试场景需求增加的问题予以解决,因此用户对CDM的部署方式提出了要求:即适应混合多云环境,支持BaaS和订阅的模式部署。敏捷数据管理平台(ADM)产品具备灵活的部署模式,既支持单机部署,也支持高可用部署、多云混合部署,且每个功能均支持在线扩展,具备扩展的便捷性。在混合多云环境中,只需要将ADM在每朵云中进行部署,即可实现备份数据、副本数据的多云间统一管理,并支持在每朵云中创建虚拟数据,实现数据的分钟级快速交付;在云环境中的测试环境,可以利用云主机的快照功能及ADM的虚拟数据功能,达到整个测试环境的版本管理(包括系统、数据),达到数据使用及管理的便利性.上讯ADM产品的数据备份模块实现了数据库、文件、虚拟化平台的备份恢复。
上讯敏捷数据管理平台ADM产品是一款企业级CDM产品,通过以数据为中心,以安全为前提,以使用为导向,以敏捷为目的的产品理念,为企业提供一套面向上中下游数据高效使用与安全管控的数据安全治理解决方案,在保证数据安全使用的同时,提高数据使用效率、降低数据存储成本。ADM产品的应用解决了数据开发利用需求下,数据使用流转环节遇到的安全性和效率问题,为企业在开发测试场景中快速供应测试数据提供了一种新的解决方案,主要应用于开发测试部门中对开发测试团队的功能测试、回归测试等具体的测试场景提供灵活的测试数据版本,通过一键切换立即调取适用于当前业务版本的数据版本,明显缩短了业务开发的测试周期.上讯信息的敏捷数据管理平台ADM产品可应用于数据安全治理领域。数据流向
上讯信息敏捷数据管理平台ADM产品的数据存储池采用压缩存储、加密传输。云虚拟机
传统的备份方案大多采用周期性的“全量备份+增量备份”策略,其增量备份大多不可持续,经过一段时间就必须执行一次全量备份。因而传统的备份方案经常面临备份窗口过大的问题,而且其增量备份数据的恢复效率相对低下,因为每个时间点的恢复都依赖于上一次全备副本和上一次全备副本后的所有增量数据,恢复操作需要进行逐个迭代恢复。此外,过期增量数据的清理操作也受限于备份副本之间的依赖关系,不一定能及时被***。而长久增量备份与全量快照合成技术,即***执行全量备份,之后只对新增或改动过的数据进行增量备份,此增量备份数据是持续的,而且每个增量备份的数据副本将自动合成为全量快照副本,便于恢复。因此,长久增量备份与全量快照合成技术能够大幅度减少备份时间,节省备份数据所需的存储空间,且提升了恢复效率。长久增量备份与全量快照合成技术适用于单个应用数据量大,执行一次完全备份比较费时费力的应用场景。若用户备份数据量小,也可使用传统的全备+增备技术方式,ADM无挂载备份能够实现此方式。云虚拟机