icon开发测试环境的测试数据交付是主要痛点icon

长期以来,开发测试场景一直是金融业数据使用频繁的典型应用场景,受到金融用户重点的关注。当前,随着互联网金融、移动业务的激增,开发测试的需求变更频繁,需要大量的业务副本数据用于开发测试、版本升级、回归测试等业务,相较于以往的测试造数,当前测试域更倾向于通过生产数据脱敏后供数的方式,一方面可以保证测试数据符合业务系统的测试条件,另一方面可以及时与最新的系统开发版本保持一致,提高开发测试与版本迭代的效率。因此,如何满足开发测试环境对数据的申请要求、如何提升数据交付的效率、如何安全管理交付的数据等,是开发测试部门主要的业务需求,通过满足这些需求,既能提升数据使用的效率,又能保障数据使用的安全,实现数据使用安全与效率的双重保障,业务上实现缩短系统上线周期的绩效目标。

icon测试数据交付需求分析icon

通过对银行软件开发中心测试环境数据的交付和管理业务进行调研分析,总结出以下普遍需求:

1、要求缩短测试数据的交付时间

项目的开发及测试是有时间周期的,由于数据量较大、数据申请较为频繁,一般一份数据的准备时间在一周左右,等待数据的时间较久,此问题不解决,将会成为开发测试提升效率的瓶颈。所以,如何提升数据副本的交付效率,是开发测试场景中首先要考虑的需求。

2、要求满足不同的数据申请需求

对于开发测试业务而言,数据的需求是多样的,有的要求某个时间点的数据;有的要求当天或前一天的数据;针对新上线的业务系统,还会有造数的需求。针对不同的数据申请需求,要求全部满足,需要考虑多种数据获取方式。

3、要求敏感数据使用前进行脱敏

在使用数据的时候,既需要考虑到敏感数据的安全性问题,又需要考虑到工作效率问题,因此,在对数据交付使用前,需要对敏感数据做相应的处理工作。需要做到自动扫描发现敏感信息,还需要做到对敏感数据的仿真脱敏,以使得敏感数据脱敏后满足实际数据使用要求。

4、要求数据使用流程闭环

开发测试使用的数据,多为从生产系统中获取的数据,基于安全和效率考虑,需要将数据获取、数据存储、数据交付、数据管理、数据回收实现全流程的闭环管理。

5、要求对副本数据进行高可用保护

交付到开发测试环境的数据,虽说是经过处理的副本数据,但对于开发测试人员来讲,该数据为测试基准数据,需要考虑到副本数据的保护问题,一旦发生故障,能够快速恢复副本数据,不影响副本数据的正常使用。

iconADM产品简介 icon

敏捷数据管理平台软件(ADM)是上海上讯信息技术股份有限公司(以下简称“上讯信息”)自主研发的,主要面向金融、运营商、政府、能源、医疗等行业打造的全生命周期数据安全管理软件产品,用于数据备份、备份数据恢复验证、测试数据交付和静态数据脱敏等应用场景,可为企业上、中、下游数据的高效使用和安全管控提供一套整体解决方案。

iconADM测试数据使用管理解决方案 icon
iconADM测试数据使用管理解决方案说明icon

通过对金融用户测试数据的需求分析,提出如下方案:

1、考虑到数据的多种获取方式及数据的闭环管理,在生产域、备份域和测试域分别部署一台敏捷数据管理平台ADM Server: 生产域的ADM Server用于直接备份生产数据,以获取实时性的副本数据; 备份域的ADM Server用于从NBU/CommVault备份系统中获取备份数据,以获取任意时间点的副本数据; 测试域的ADM Server用于接收生产域或者备份域处理后的副本数据,以用于测试环境的数据交付域。

2、生产域、备份域均属于生产网络,而测试域属于测试网络,两个网络是独立的,考虑到安全性与数据的传输效率,需将生产网络与测试网络单向打通。

3、生产域的ADM Server可用于实时备份有频繁交付数据需求的业务系统,可实现备份集备份、原格式备份两种备份方式。

4、备份域的ADM Server可用于从NBU/CommVault备份系统中获取任意时间点的备份数据,并且在获取数据的同时,也可以帮助用户解决备份数据恢复校验的问题。

5、测试域的ADM Server可用于满足开发/测试环境的数据交付、测试数据版本管理、测试数据版本切换、测试数据回收等需求。

icon核心专利技术 icon

数据库虚拟化技术:数据源>3:1比率压缩存储、虚拟数据无限副本、虚拟数据分钟级创建、秒级分发。

iconADM测试数据方案效益对比 icon
icon信创国产化互认证明 icon
icon解决方案用户收益 icon
测试数据快速交付提升测试效率
敏捷数据管理平台ADM采用创新型技术——数据库虚拟化技术几分钟内创建完成虚拟数据库,快速将已经脱敏过的数据作为黄金副本传输到测试网,有效减少开发测试场景中测试数据的准备时间,提高了开发测试环境搭建的效率;多份虚拟数据库读写操作独立,完全满足测试环境多场景同步测试的需求。
测试数据版本灵活管理
ADM快照功能,可以灵活对虚拟数据库的状态进行管理和维护,便于开发测试的数据版本迭代。动态快照的使用保证了虚拟数据库持续对外提供服务,不影响测试业务的连续性。
测试数据系统可视化管理
测试环境的数据,版本繁多,传统人为创建副本保存的测试数据,很难形成有效的数据血统管理,通过ADM的部署,利用可视化的结构拓扑图,可以清晰展现数据版本间的血统关系,对数据的使用一目了然。
测试数据存储压缩
ADM内置独有的高效压缩存储池,压缩比达3:1,显著降低了基础数据源获取的存储成本,一份基础数据源,可挂载多份虚拟数据库,节约了存储成本10倍以上,快照共享降低了持续增长的副本数据存储成本。
测试数据集中统一管理
测试数据具有数据副本多、数据版本多的特性,人为管理容易形成较多的僵尸数据,造成存储资源的浪费,通过ADM管理测试数据,可以形成闭环流程,集中统一管理测试数据的交付与版本管理,提升数据管理效率的同时,杜绝了僵尸数据的产生。
数据脱敏保证金融数据安全
ADM平台具备数据脱敏管理模块,可实现自动扫描识别敏感数据,精准定位敏感数据源,提供丰富的仿真脱敏算法,保证脱敏后的数据关系一致,异构和并发脱敏提升了数据脱敏的效率,降低了数据泄露的风险。 ADM的数据副本管理与数据脱敏管理可以实现良好的联动,不仅能够快速准备脱敏数据源,还能实现脱敏数据的快速分发。
icon金融业案例 icon
ADM构建数据安全交付管理平台
提升测试数据交付速度,加快开发测试业务处理效率,缩短业务上线周期 敏感数据自动识别,隐私数据高仿真度脱敏,防护数据安全,降低存储资源成本,降低用户TCO 灵活管理数据版本,高效切换版本满足测试需求。
icon经典案例 icon
中信银行股份有限公司
全面兼容生产与测试环境基准数据的数据源类型,获取方式灵活便捷 减少人为操作,提高测试数据交付速度,加快测试数据交付效率,集中统一的数据管理流程,方便测试数据审计与环境资源的回收利用 高效压缩存储池显著降低存储成本,高可用架构部署,管理节点实现故障后的快速切换,保证服务和数据持续交付。
icon经典案例-广州银行股份有限公司 icon
01
副本数据管理(CDM)与静态数据脱敏(SDM)为一体的综合数据管理平台
02
测试数据安全、快速交付,高效压缩存储池显著降低存储成本
03
数据管理流程集中统一,快照共享保证严格的测试数据版本管理
04
敏感数据自动识别,精准定位,依据类型加以分类
05
敏感数据高仿真脱敏,丰富的脱敏算法保证脱敏数据的完整性与逻辑保持
icon金融业案例 icon
产品推荐 查看更多>>
    威努特工控安全隔离与信息交换系统WISGAP

    威努特工控安全隔离与信息交换系统WISGAP,采用“内外网双主机+专有安全数据交换模块”架构以及专用安全操作系统,确保内外网在任何时候无联通的电气连接,剥离TCPIP协议栈,摒弃OSI七层模型的所有不安全因素,实现网络的高安全隔离。

    信息交换

    高可靠性

    高安全隔离

    协议支持

    精容数安CDM数据保护一体机

    精容数安CDM数据保护一体机,可虚拟化成多个副本直接挂载给服务器,分别用于备份恢复、容灾或开发测试。降低存储成本,缩短数据交付周期,降低人力时间投入,提升数据集中管控能力。

    降低存储成本

    缩短数据交付周期

    降低人力时间投入

    提升数据集中管控能力

    网御星云大数据安全管控系统 DSM

    网御大数据安全管控系统(以下简称:Leadsec-DSM),实现大数据平台组件的用户鉴权、权限控制、数据脱敏、安全审计等功能,以满足客户对大数据平台自身安全管控的需求,有效杜绝由运维人员、数据分析人员等使用原始数据而造成数据泄露的风险,保障了大数据平台的数据安全和用户安全。

    用户鉴权

    权限控制

    数据脱敏

    安全审计