消息队列抽取敏感数据处理

上讯信息敏捷数据管理平台的备份数据管理模块，突破了传统备份理念，基于特有的CDM数据库虚拟化技术，不仅可以实现对数据库的实时性持续备份以及本机、异机的快速恢复，还可以同时对备份数据的有效性进行验证。对于已经部署了NBU/CommVault等备份系统的用户，可以对接备份系统，实现存储空间、恢复服务器和恢复任务的自动调度，从而实现备份数据有效性验证的全自动化，并根据验证结果生成详细的恢复验证报告。在恢复验证任务结束后，自动清理恢复环境，释放存储资源和恢复服务器资源，以用于下一个恢复验证任务的使用，使整个数据备份恢复验证工作能够周期性地循环运转.上讯敏捷数据管理平台ADM产品能对接NBU自动恢复。消息队列抽取敏感数据处理

ADM平台具备根据管理人员、测试需求等内容的不同进行分组划分的功能，将数据进行分组管理，从下游测试数据管理的源头管控数据资源的类别，做到从源头划分类别，使下游测试数据管理形成上游数据源----中游数据中转----下游数据目标的闭环式数据使用流程，规范化的数据流程使数据管理者成为数据的负责人，自动化的资源管理也更有效地为金融行业用户提供安全的数据管理方案。同时，ADM提供对数据流转的树状拓扑结构图，可详细了解数据的来源、所属存储池、挂载的测试服务器，以及数据快照的层级关系，方便对系统全局的数据使用结构进行预览，通过可视化的结构拓扑图，帮助用户了解下游测试网中测试数据的归属关系，完善数据流转路径，优化数据资源的合理分配，可视化功能的动态展示将助力企业向着智能化数据安全治理的方向转型。恢复资源管理上讯ADM产品的成本控制体现在节约存储资源降低存储成本，自动化流程节约了人力成本。

敏感数据处理是上讯敏捷数据管理平台（ADM）产品功能模块之一，主要针对敏感数据的处理使用，提供集敏感数据自动识别、仿真处理与数据交付为一体的敏感数据管理功能，覆盖了敏感数据使用与管理的全部场景。针对敏感数据识别提供通用数据特征库，敏感数据类型包括但不限于个人身份信息、组织机构信息、资质资格证信息、金融数据信息、医疗数据信息、车辆数据信息等众多类别，支持全库与子集自动扫描识别，包括数据内容、字段类型、约束关系均可以实现自动识别，并依据类型特征加以分类；针对敏感数据的仿真处理，ADM内置大量数据算法对敏感数据进行随机化、模糊化替换，保证处理后数据的完整性、仿真性以及数据间的关联关系保持不变，支持处理结果的校验。

ADM产品测试数据多副本快速交付ADM是国内**早的副本数据管理（CDM）产品，采用数据库虚拟化技术对原始数据库副本（黄金副本）快速生成多个虚拟数据库作为测试数据副本，满足开发测试场景的测试数据快速供应。Ø100倍数据交付效率提升10TB的数据恢复时间由原来的小时级缩短至分钟级；Ø10倍工作效率提升在开发、测试环境中，使用者可随时对虚拟库做快照标记，快照对应着不同时间的数据版本。数据版本管理可进行任意标记的快照切换，降低数据导入或恢复产生的时间成本，大幅提升工作效率。Ø10倍存储空间节省首先内置存储池存储即压缩的机制可实现约3:1的数据存储压缩，同时交付的多个虚拟数据库由于共享于一份原始数据，因此基本不占用额外的存储空间，随着交付虚拟数据库的数量增加，节约的存储空间会成倍增加，实际应用场景中至少为用户节约10倍的存储空间。上讯敏捷数据管理平台ADM产品能对接NBU直接恢复。

通过智能定义敏感数据类型，自动发现和识别敏感数据，包括数据类型、内容、约束关系，灵活排序减少人为筛选，定位敏感数据源。丰富的算法与仿真的字典库相结合，保证处理后数据仍具有业务属性，数据表间关系仍具有业务一致性，不影响数据挖掘分析数据价值。对涉及企业、个人信息的隐私数据，包括资金财产、个人、企业隐私的对照关系进行敏感数据识别，通过内置的规则进行处理，将数据敏感部分去隐私化，但并不失去数据挖掘的价值特征，减少数据隐私泄露带来的风险和损失，甚至降低可能发生的人身伤害和违法犯罪事件。市面上的敏感数据管理产品有哪些？实时日志

上讯ADM能提供面向企业数据使用的成本控制、版本管理与合理合法开发利用。消息队列抽取敏感数据处理

企业开发需求更新频繁，对测试环境和测试数据提出了同步变更的要求，ADM的虚拟数据库快照功能解决了测试数据版本迭代的问题，通过对数据库状态进行定时或即时的记录，保留当前虚拟数据库的状态作为测试数据版本，一旦需要调用某个版本时，只需切换到不同时间点的虚拟库快照即可，灵活实现测试数据版本的任意切换，ADM还支持创建和维护虚拟库级联快照，满足回归测试等具体应用场景，通过这一功能明显提升了开发测试效率、升级迭代效率。消息队列抽取敏感数据处理