敏捷数据管理平台(Agile Data Management)简称ADM,是采用基于CDM(副本数据管理)的数据库虚拟化技术,为企业上中下游数据的备份恢复、数据验证、敏感数据处理、分发交付提供的面向数据全生命周期的安全管理解决方案,在保证数据安全使用的同时,提高了数据使用效率并降低了数据存储成本。ADM由数据备份管理、备份校验管理、数据副本管理、敏感数据处理管理组成,实现了数据复制容灾、数据存储管理和数据流程管理,通过自动化流程任务编排的方式实现了数据使用的成本控制、版本管理与开发利用,能够充分发挥了数据资产的潜在价值。备份数据是一家企业数据资产的来源,要注重安全防护。平台与其他系统对接
上讯敏捷数据管理平台(ADM)支持重复数据删除技术,在典型的重复数据删除技术中,根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后,会根据输入侧不同粒度(卷级、文件级、块级)的数据采取不同的数据切分策略,并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略,当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法,通过对数据块进行哈希算法的标记,即指纹(Fingerprint),在指纹库中寻找相同的指纹。如果存在相同指纹,则表示已保存了相同的数据块,ADM则不再保存此数据块,而是引用已存在的数据块,从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据,从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题,较大限度地提升重删性能和重删率,为避免数据备份过程中冗余网络传输与存储开销,在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余,目的在于不备份任意一个冗余数据。极少的存储空间占用上讯信息敏捷数据管理平台ADM产品的数据备份模块通过数据重删可节省传输占用的网络带宽和数据存储空间。
备份是一个长期的过程,恢复往往只在事故发生后进行,且备份数据的可恢复性、可用性在很大程度上依赖于备份数据的完整性。为了保证备份数据的可用性,很多企事业单位会定期进行数据库备份的恢复演练,也就是从备份数据中恢复出一套完整的数据库。执行备份数据的恢复操作,需要备份系统管理人员或者数据库管理人员(DBA)对数据的备份恢复实现原理有深入的了解,并周期性地对备份数据进行恢复操作,以保证备份数据的可恢复性与可用性。这种长期机械性、重复性的备份、恢复及验证工作,无疑会占用DBA大量的时间和精力。在DBA界还流传着这么一句话:“故障一定会发生,只是早晚的问题!”。作为一名DBA,只有时刻记得进行备份和恢复校验,才能避免某一天事故发生时出现难以挽回的悲剧.
上讯敏捷数据管理平台(ADM)既可以封装在敏捷数据管理流程的中间环节,也可以单独作为敏感数据处理的抽取平台,两种模式满足了当前用户对数据处理的全部需求。 提供系统用户角色权限的配置管理,负责系统角色用户功能的划分,操作权限的分配,负责处理任务向上级的申请,上级用户负责审批、转发、会签或驳回以及复核工作的需求。当前系统内置丰富的算法,具备广义的通用型规则,包括字符替换、随机生成、截短、加权生成、加密等;支持保留原有数据含义的仿真型规则,支持中文字典库与编码字典库,保证姓名、身份证号、证件号、地址、组织机构代码等数据的有效性、可用性,算法经优化已处理超长字符截断和重复数据的问题。上讯ADM产品的高效性体现在数据从上游生产环境到下游使用环境通过虚拟副本创建实现分钟级交付。
数据流程管理是ADM功能模块之一,主要通过灵活配置数据流转环节实现数据管理流程的自动化作业编排,ADM采用基于画布的方式默认作业流程的起止节点,根据实际需求将数据的获取、恢复、***、传输、共享、交付、销毁等各个环节对应的任务组件灵活拖动到作业画布,组成一个完整的任务流程,各任务之间支持依赖关系、延时机制以及断点处理机制,**终实现数据管理流程任务的串联组建和并行执行,达到数据管理流程的自动化执行,协助用户将数据交付流程的各个工作环节灵活地组合起来,实现数据交付的自动化,从而摆脱人工值守,达到缩减时间成本和人力成本的目标。敏捷数据管理平台ADM产品数据信创产品,实现了国产数据库的备份与国产操作系统的兼容。标签分组管理
上讯信息敏捷数据管理平台ADM产品的数据存储池采用压缩存储、加密传输。平台与其他系统对接
组织内部应建立一套完善的数据备份恢复体系,部署相应的数据备份恢复平台,实现对生产数据的定期备份和恢复验证。该平台应包括对备份数据进行定期的恢复验证,周期间隔跨越日、月、季度、半年、年等,恢复验证策略设置完毕可自动执行,确保数据的可恢复性和可用性;该平台应能对长期存储的备份数据进行时效性管理,针对数据的分享、存储、使用和删除设定有效期,过期存储数据可进行删除或再次授权使用;该平台应能对备份数据进行压缩或加密存储,保证存储空间的有效利用.平台与其他系统对接