测试数据快速交付最佳实践

并行重删技术是在多个不同的节点上构建指纹库，并将指纹并行分布于多个节点，采用内存级指纹库进行重删，所有指纹读写全部保存于内存中，从而提升指纹查询和处理效率，并且减少了因磁盘中指纹库增大所导致的随机IO压力。以此识别并消除数据备份过程中数据源中重复的数据，该技术适用于不同平台中的文件、数据库、虚拟机等不同应用类型的数据，可以大幅度减少需要传输的数据量，从而极大地节省数据传输带宽，解决单点性能和存储空间压力。ADM可对虚拟副本拍摄快照实现数据副本状态的保留进行灵活的数据版本管理，适用于数据库和文件。测试数据快速交付最佳实践

敏捷数据管理平台（ADM）由管理控制中心（Master）、数据服务节点（CDMServer）、***服务节点（SDMServer）、客户端（Client）组成，服务节点可通过主备节点部署实现高可用，通过灵活的横向节点扩展实现功能扩展和容量扩充，每个服务节点可以安装在物理服务器或虚拟服务器中。一个或多个客户端连接到服务节点，组成一个完整的数据管理平台，客户端负责收集数据、传输数据，服务节点负责接收数据、存储数据、数据脱敏以及管理数据。敏捷数据管理平台（ADM）由4个模块组成：数据服务节点（CDMServer）包括数据备份模块（PDM）、数据校验模块（BDM）、数据交付模块（TDM）3个模块；***服务节点（SDMServer）包括数据脱敏模块（SDM）1个模块。敏感数据变形后分发ADM可实现备份数据任意时间点挂载恢复快速对恢复数据进行验证。

备份校验管理是ADM功能模块之一，主要用于对接第三方备份系统进行备份数据的自动化恢复校验，保证备份数据的可恢复性、完整性。通过对接备份系统（如NetBackup、Commvault、NetWorker等）集中管理存储资源、恢复服务器资源和恢复任务，实现存储空间、恢复服务器和恢复任务的自动调度，从而完成备份数据有效性验证的全自动化。备份校验管理可以满足用户对当前备份数据的可恢复性验证、恢复后的完整性验证两方面的需求，能够覆盖用户全部业务系统的备份数据恢复验证需求，自动化实现跨操作系统平台Unix到Linux的数据恢复，实现验证工作的高覆盖率，提高备份数据有效性验证的频率。

数据闭环式流转与安全管控，保证全生命周期数据资产管理ADM贯穿数据收集、数据存储、数据加工、数据传输、数据使用、数据提供、数据回收的各个环节，集中管理存储资源、服务器资源，实现闭环式自动化管理流程，统一授权和全程监控，节省大量人力资源开销，减少了数据恢复的重复性工作，自动化流程任务编排降低了人为因素导致的数据泄露风险。基于数据库虚拟化技术，ADM实现了对数据库、文件、虚拟机等副本的分钟级创建，通过存储级快照快速保留数据副本的状态，实现数据版本的保留，跟踪数据流向。同时，数据副本支持时效性设置，当数据副本超出使用期限，ADM平台会自动停止使用或回收资源，实现对数据资产的全生命周期统一管理。上讯ADM产品是集数据备份管理、备份校验管理、数据副本管理、数据脱敏管理四位一体的数据管理产品。

《中华人民共和国数据安全法》中明确指出数据处理，包括数据的收集、存储、使用、加工、传输、提供、公开等。数据安全，是指通过采取必要措施，确保数据处于有效保护和合法利用的状态，以及具备保障持续安全状态的能力。当前，有效的保障数据安全的方式仍然是数据备份，即企业针对生产业务的数据、文件制定备份策略生成备份数据，一旦业务数据发生丢失或损坏，则恢复备份数据提供业务访问，传统的数据备份方案并未提供数据的恢复验证手段，因此企业在发生数据丢失时，启用备份数据恢复失败的案例屡见不鲜，这也给各行业客户造成了巨大的经济损失和不良的社会影响，为满足法律的合规性要求，备份数据的恢复验证成为备份恢复解决方案的必要需求，但由于备份数据量巨大、涉及业务系统繁多、专业人员数量有限，定期的备份数据恢复验证仍然是一道难题，上讯敏捷数据备份恢复验证解决方案为备份数据的恢复验证提供了创新的技术手段，包括备份数据的分钟级快速恢复、秒级可用性验证、按计划周期性定时自动恢复验证，保障了备份数据的可恢复性与可用性.虚拟数据库技术是通过获取一份基础数据源，快速拉起多份虚拟数据库挂载给目标业务使用。任务并发数

目前，ADM备份数据恢复验证管理功能实现了按计划设定备份恢复任务并自动执行，无需手动操作。测试数据快速交付最佳实践

数据资源可视化管理，有效满足上中下游数据的政策合规ADM平台具备根据管理人员、测试需求等内容的不同进行分组划分的功能，将***过的数据进行分组管理，从下游测试数据管理的源头管控数据资源的类别，做到从源头划分类别，使下游测试数据管理形成上游数据源----中游数据中转----下游数据目标的闭环式数据使用流程，规范化的数据流程使数据管理者成为数据的负责人，自动化的资源管理也更有效地为金融行业用户提供安全的数据管理方案。同时，ADM提供对数据流转的树状拓扑结构图，可详细了解数据的来源、所属存储池、挂载的测试服务器，以及数据快照的层级关系，方便对系统全局的数据使用结构进行预览，通过可视化的结构拓扑图，**帮助用户了解下游测试网中测试数据的归属关系，完善数据流转路径，优化数据资源的合理分配，可视化功能的动态展示将助力企业向着智能化数据安全治理的方向转型。测试数据快速交付最佳实践