数据副本管理
在国家大力发展信创的背景下,实现国产化软硬件部署已成为企业的**诉求,其中逐步建立覆盖国产化数据库、操作系统、虚拟化平台的国产化数据保护体系,实现备份数据自动化恢复验证成为当前数据保护系统的迫切需求。同时,以金融和运营商行业为例,其开发测试部门需要频发测试验证,对数据使用频率较高,因此形成了大量不同版本的测试数据,这部分数据体量庞大,动辄几百GB甚至几十TB,管理难度较大。国家日趋重视对数据隐私的安全管控,数据脱敏成为企业数据安全治理的重要方向。上讯ADM产品采用副本数据管理CDM面向数据全生命周期进行数据安全管理。数据副本管理
敏捷数据管理平台(Agile Data Management)简称ADM,是采用基于CDM(副本数据管理)的数据库虚拟化技术,为企业上中下游数据的备份恢复、数据验证、敏感数据处理、分发交付提供的面向数据全生命周期的安全管理解决方案,在保证数据安全使用的同时,提高了数据使用效率并降低了数据存储成本。ADM由数据备份管理、备份校验管理、数据副本管理、敏感数据处理管理组成,实现了数据复制容灾、数据存储管理和数据流程管理,通过自动化流程任务编排的方式实现了数据使用的成本控制、版本管理与开发利用,能够充分发挥了数据资产的潜在价值。定期全量备份数据安全领域的CDM是指copy data management。
上讯敏捷数据管理平台适用场景:数据交付速度慢的开发测试部门企业通过交付生产数据辅助第三方业务决策,如开发/测试环境、统计分析、准业务系统环境搭建等,交付生产数据的方式是通过生成业务系统数据副本,而副本的准备通常需要几小时,甚至几天不等,严重拖延了项目进度。
备份数据的有效性验证效率低的运维部门,大部分企业对其**业务系统进行了数据备份,为了检验备份数据的有效性,以及满足相关法律法规的要求,企业对备份数据采取周期性的恢复验证;由于企业的业务系统繁多,而人员相对紧缺,验证工作需要大量重复性动作,成为企业当前面临的一大挑战。
数据副本分散存放难以管理的数据中心数据副本一旦被交付使用,就**存在于使用环境中,随着数据使用场景的日益增多,数据副本在非生产环境中逐渐累积,**分散的存放方式导致副本的辨识度不高,后续使用与销毁难度明显增大。同时,重复存放现象严重造成了存储资源的浪费。u隐私数据泄露风险高的用户无论是通过生产数据库导出,还是通过备份系统恢复,都能够直接获取到企业的**生产数据,其中包含企业内部机密数据和客户个人隐私信息,一旦发生泄露将带来严重后果,不仅影响企业的名誉,也会造成一定的经济损失。
上讯敏捷数据管理平台(ADM)既可以封装在敏捷数据管理流程的中间环节,也可以单独作为敏感数据处理的抽取平台,两种模式满足了当前用户对数据处理的全部需求。 提供系统用户角色权限的配置管理,负责系统角色用户功能的划分,操作权限的分配,负责处理任务向上级的申请,上级用户负责审批、转发、会签或驳回以及复核工作的需求。当前系统内置丰富的算法,具备广义的通用型规则,包括字符替换、随机生成、截短、加权生成、加密等;支持保留原有数据含义的仿真型规则,支持中文字典库与编码字典库,保证姓名、身份证号、证件号、地址、组织机构代码等数据的有效性、可用性,算法经优化已处理超长字符截断和重复数据的问题。海量数据供数于下游开发测试统计分析场景的数据使用需求该如何满足?
在典型的重复数据删除技术中,根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后,会根据输入侧不同粒度(卷级、文件级、块级)的数据采取不同的数据切分策略,并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略,当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法,通过对数据块进行哈希算法的***标记,即指纹(Fingerprint),在指纹库中寻找相同的指纹。如果存在相同指纹,则表示已保存了相同的数据块,ADM则不再保存此数据块,而是引用已存在的数据块,从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据,从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题,比较大限度地提升重删性能和重删率,为避免数据备份过程中冗余网络传输与存储开销,在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余,目的在于不备份任意一个冗余数据。信息敏捷数据管理平台ADM包括生产数据备份、备份恢复校验、敏感数据处理、数据副本管理四大功能模块。对象存储区域
哪个产品支持向导式的敏感数据处理流程?数据副本管理
测试数据版本迭代管理,提升开发测试业务的变更效率企业开发需求更新频繁,对测试环境和测试数据提出了同步变更的要求,ADM的虚拟数据库快照功能解决了测试数据版本迭代的问题,通过对数据库状态进行定时或即时的记录,保留当前虚拟数据库的状态作为测试数据版本,一旦需要调用某个版本时,只需切换到不同时间点的虚拟库快照即可,灵活实现测试数据版本的任意切换,ADM还支持创建和维护虚拟库级联快照,满足回归测试等具体应用场景,通过这一功能明显提升了开发测试效率、升级迭代效率。数据副本管理