数据编码规则
通过敏捷数据管理平台ADM产品的部署实施,采用数据库虚拟化技术,快速将数据交付到开发、测试网,有效减少开发、测试场景中测试数据的准备时间,提高了开发、测试环境搭建的效率。ADM内置独有的高效压缩存储池,平均压缩比3:1,存储即压缩,降低了基础数据源获取的存储成本,只需一份基础数据源,即可快速拉起多份虚拟数据库,节约了存储成本10倍以上。ADM通过虚拟数据库快照功能,可以灵活地对虚拟数据库的状态进行管理和维护。使用人员可以随时保存当前的数据库使用状态,用于开发、测试的数据版本迭代。上讯敏捷数据管理平台ADM产品高效压缩存储池,节省大量存储资源。数据编码规则
敏捷数据管理平台(ADM)由管理控制中心(Master)、数据服务节点(CDM Server)、敏感数据处理服务节点(SDM Server)、客户端(Client)组成,服务节点可通过主备节点部署实现高可用,通过灵活的横向节点扩展实现功能扩展和容量扩充,每个服务节点可以安装在物理服务器或虚拟服务器中。一个或多个客户端连接到服务节点,组成一个完整的数据管理平台,客户端负责收集数据、传输数据,服务节点负责接收数据、存储数据、敏感数据处理以及管理数据。NetBackup安装路径上讯敏捷数据管理平台ADM产品虚拟数据支持无限副本,几乎不占用额外的存储空间。
敏捷数据管理平台(Agile Data Management)简称ADM,是采用基于CDM(副本数据管理)的数据库虚拟化技术,为企业上中下游数据的备份恢复、数据验证、敏感数据处理、分发交付提供的面向数据全生命周期的安全管理解决方案,在保证数据安全使用的同时,提高了数据使用效率并降低了数据存储成本。ADM由数据备份管理、备份校验管理、数据副本管理、敏感数据处理管理组成,实现了数据复制容灾、数据存储管理和数据流程管理,通过自动化流程任务编排的方式实现了数据使用的成本控制、版本管理与开发利用,能够充分发挥了数据资产的潜在价值。
数据资源可视化管理,有效满足上中下游数据的政策合规ADM平台具备根据管理人员、测试需求等内容的不同进行分组划分的功能,将***过的数据进行分组管理,从下游测试数据管理的源头管控数据资源的类别,做到从源头划分类别,使下游测试数据管理形成上游数据源----中游数据中转----下游数据目标的闭环式数据使用流程,规范化的数据流程使数据管理者成为数据的负责人,自动化的资源管理也更有效地为金融行业用户提供安全的数据管理方案。同时,ADM提供对数据流转的树状拓扑结构图,可详细了解数据的来源、所属存储池、挂载的测试服务器,以及数据快照的层级关系,方便对系统全局的数据使用结构进行预览,通过可视化的结构拓扑图,**帮助用户了解下游测试网中测试数据的归属关系,完善数据流转路径,优化数据资源的合理分配,可视化功能的动态展示将助力企业向着智能化数据安全治理的方向转型。上讯信息敏捷数据管理平台ADM产品的数据备份模块通过数据重删可节省传输占用的网络带宽和数据存储空间。
(1)国产化数据备份系统兼容性不足当前国产化数据保护系统对国产化数据库、文件、虚拟化平台、容器、云服务器等备份源类型兼容不***,适配过程中需要更多的时间进行功能稳定性验证。(2)数据备份恢复验证耗时耗力当前采用NetBackup等集中备份系统备份的数据需采用手动恢复数据,过程繁琐、重复度高、专业性强,耗费大量的时间和人力成本。(3)数据交付时间长不论是通过数据恢复还是数据拷贝来提供测试数据,需要几小时到几周的时间。(4)占用大量存储资源数以千计的数据副本占用大量存储资源,需要更多的维护成本。(5)数据版本回退困难开发、测试环境中,当完成一轮跑批测试或功能调试后,重置数据状态需要重新导入数据或重新恢复数据,回退数据产生的时间成本巨大。(6)数据安全风险真实数据被用于测试使用后无法及时回收和销毁,造成资源浪费,存在敏感信息泄露的安全风险。(7)敏感数据安全隐患生产数据库中存在着大量的敏感信息,传统的手工***效率低、仿真度差、***不完全,交付给测试环境后存在隐私泄漏的风险。上讯信息敏捷数据管理平台ADM产品的数据备份模块通过虚拟挂载恢复可快速检验备份数据的可用性和有效性。查询分析
海量数据供数于下游开发测试统计分析场景的数据使用需求该如何满足?数据编码规则
l数据压缩存储ADM支持同步数据压缩,自动化地将同步数据按照3:1的比例压缩,系统存储空间显示已压缩的容量大小,存储即压缩。l自助式数据服务ADM不仅可以灵活地提供任意时间点的数据,还可以对虚拟数据库进行图形化、自助式的管理。l虚拟数据库集中管控虚拟数据库集中管控是对虚拟数据库在使用过程中的状态进行管理,包括如下功能:①虚拟数据库版本管理②虚拟数据库共享管理③虚拟数据库记录查询l敏感信息智能扫描ADM内置敏感信息匹配库,对数据库的敏感信息进行智能定义扫描,成功发现后自动匹配成敏感类型,以匹配度和敏感信息类型进行灵活排序,避免漏扫。l关联关系保持一致支持对数据库中表间和表内的约束信息和索引信息进行***,支持视图、序列、触发器、存储过程等数据对象的抽取,保持***前后数据关系的一致。数据编码规则