欢迎访问信息侠官方网站!

行业新闻

解析CIFS|太平洋保险集团张文若:信创备份解决方案
2024-05-06
我来自太平洋保险集团科技管理部,现在主要负责基础架构和信创项目的推广和实施工作。今天汇报的主题是备份的信创解决方案,在信创的工作中我们一直秉承着信创方案的制定兼容性是一部分,兼容性是基础,创新才是信创的关键。所以我们在进行备份升级解决方案的时候,进行了充分的市场调研。

01
企业备份技术的发展

信息技术(IT)维度升高,面临剧烈洗牌

现在我们是一个数字化转型的时代,原来在信息化时代,我们的IT资产主要是包括机房、风火、水电等环境,各种应用信息系统和信息系统中支持业务发展所产生的数据,而在数字化时代IT核心资产就是数据,重要性是远远超过算力、带宽、存储容量,数字化转型的本质是IT从低维向高维的演进,数据不仅能存储,在需要的时候恢复出来,还能够可回退追溯,可预测,可以支持各种新型的应用。

数据备份面对数字化转型的重新定义

从马斯洛需求原型来看,原来的备份数据更多是从安全的需求出发,未来随着数字化转型的推进,备份不仅是数据保护的运维工具,更是通过数据管理将备份数据资产化,从而提供数据服务,实现业务价值。

当今全球数据备份发展趋势

数据管理的技术体系已经呈现多元化,也正在酝酿一些重大的变化,以元格式和云原生为代表的新势力在不断的上攻,旧势力在逐渐下降。

原格式备份技术的划时代意义

所以,大家想一想我们在做信创备份解决方案替代的时候,可以做这样的比方,原来打包备份集,映象文件,就像一个胶卷相机,备份了,看不到数据,要恢复出来才能看到。而原格式拷贝的备份就像数码相机,备份出来即拍即看,能直接挂载备份数据,能够直接追溯查询备份周期内的所有数据,所以我们就确定了本次备份技术的升级方向,不是平替,而是采用下一代CDM的备份技术,这样在实现自主可控的同时,也实现技术升级换代。

新型数据备份技术的现实意义

国内金融机构绝大多数是使用国外的备份软件,单纯的国产化不仅是历史的倒退,而且促使我们技术升级的窗口,做一次所有数据的导入和导出要花大量的人力和物力,所以我们觉得一定要结合本土的创新技术,结合世界上备份技术的发展,要完成备份软件的替换和升级,使我们的应用系统或者使我们的备份安全保护的方案能具有数字化的竞争优势,同时我们通过这一次的备份方案的升级,可以实现跨越式的发展。

从介质和成本来看,原格式备完即可用可见”相对需要物理拷贝恢复的存储节省是革命性的,虚拟副本服务对多副本使用场景的存储精简和敏捷化,使得业务部门同时获得低成本和高效率,但也不得不说原格式的存储模式必然会带来成本的上升。但我们相信随着技术的发展,这部分的成本会逐步的下降。

02
太保的备份现状

通过这些考察我们选定的方向,原来的系统是什么样?能不能实现一步性的跨越升级换代呢?我们这个系统是从2004年建设的,当时也是采用了国际主流的备份软件,历经20年,进行了5-6次的大版本升级。2004年建设之初搭建了主备份服务器的HA,也进行了磁带备份的调优。2007年升级了磁盘去重的技术,2009年实现了多备份的集中域监控,原有的备份软件一体机去重,2018年在我们公司两地三中心建成的总体布局之下,实现了跨区域的复制。

我们选择新的备份解决方案,必然要比原有的方案好,不仅能够覆盖,还要有所提升。现在的备份模式主要是D2D2T,少部分是D2T,我们为了做出库保存,磁带是同城的出库保存。我们有上万个客户端,8000个策略,每月的备份作业有40万个,成功率大于99%,这个从上线开始一直比较高。现在有上P级的数据源,大多数为Oracle的数据库,每周数据量可以增长5%-10%,54%是一体机来做D2D2T,少部分是直接到磁带库,虽然备份策略比较少,但备份的数据量比较大。磁盘的备份速度平均是100M/s,磁带也可以做到80M/s。

原有备份软件替换方案风险和挑战

我们要换成新的解决方案,面临的挑战是,原有一体机的解决方案比较老旧了,厂家停止了服务,原有的备份软件对新型的数据库支持不好,也不支持国内新兴的数据库。所以面临整体情况,我们觉得这个方案有几个挑战:

首先,实施方案相对比较复杂,考虑到数据的一致性和数据管理的便捷性,我们认为是越短切换会对我们更有利,对未来数据使用更好。我们会把备份切换的时间压得最短,实现一次性的切换,我们希望在三个月时间内完成。

另外,我们需要足够了解原有的备份软件和对新的备份软件都非常熟悉的实施人员,能保证在迁移的过程中原有的策略和数据都不会有损失。同时我们还组件了项目管理的团队,我们也有了一些自主研发的同事加入在内,开始进行自动化的研发。还有一个挑战,我们希望把原有的一体机能够利用起来,能够改造成机构备份软件可以使用的基础架构。

还有一个挑战是历史数据的迁移,我们从2004年开始使用的备份数据,每年离线永久保存的数据是浩如烟海,所有的数据要能够无损转换到新的备份软件上。还要在切换的过程中不降低效率,能够把我们原来的一些备份管理和自动化的经验固化下来,经过长达一年的考察,我们终于选择了新一代的备份厂商作为我们的合作伙伴,希望新的方案框架能够满足全栈信创,不仅自己的系统能够全部支持信创的组件,同时还能够支持不同的数据源,信创与非信创的数据源。基于两地三中心的模式,能够实现本地备份,按需跨城或跨区域的复制备份、异地备份,同时能够配合项目的快速落地,实现自动化和迁移。

03
备份升级转型技术方案

方案整体框架介绍

我们用了三个月的时间落地了新的备份解决方案。上海两个数据,主数据中心的数据,除了本地备份,要复制到同城数据中心做同城的支持,也会异地复制到灾备中心,支持灾备的数据保护以及开发测试的脱敏使用。

从单域的架构来讲,充分利用了现有的备份一体机,补充必须的备份服务器和存储容量。每个备份域内部也是和原来的备份架构基本相似,分为主控服务器、存储服务器、客户端三层架构。存储服务器提供了和客户端直接加载的功能,主控服务器实现设数据的热备和冷备,存储服务器可以灵活的实现横向的扩展,服务器均可以实现自动的铺张转移。

保障方案

迁移的过程中我们也制定了多项的保障措施,全面提升质量保障水平,包括变更的标准化,通过自动化的工具完成变更操作,提供标准化的交付结果,减少人力投入,避免误操作。第二点,全覆盖的演变,上了新的备份系统之后,我们自研了自动化的恢复演练工具,及时发现解决备份数据中存在的问题隐患。第三个是通过报表持续的进行隐患分析,掌握备份的执行情况,及时发现隐患,迭代优化软件。

在这三个月的时间里,我们的软件经历了一次大版本的升级,多次小版本的升级,最后是7×24小时的全面监控,配置实时备份工单告警,及时处理,保证备份的成功率。

原有数据转储方案

我们有一个原有数据转存的方案,在这个过程中我们也是根据新软件的特点,通过自动化的策略,把原有的备份软件恢复,CDM的恢复转储过程做到了标准化流程,通过统一平台,实现全部的转存。

方案计划

方案计划要在短时间内全部完成,第一个阶段是试点,我们选取不同的类型,来进行不同阶段的目标。第一个阶段主要是验证方案的可行性。第二个阶段是主力阶段,我们用一个多月的时间,70%的备份策略完成了转换。最后一个是攻坚阶段,就是核心库和大库,在原有备份系统里就碰到很多性能问题和恢复问题的时候,在新的备份解决方案上也不断地磨合,找到合适的解决方案,最后实现了全部的迁移。

04
实施方案与成果

最后看一下方案的总体效果,备份的成功率和备份的恢复率基本上和原来是持平的。对于备份的效率,我们不仅没有下降,而且还有所提升。

总结下来,这个方案用了三个月的时间,无缝的从原有国外的备份软件转移到国内新一代的备份软件,不仅实现原有备份功能、数据的全部迁移,而且也实现了CDM数据即备即用的试点工作,也充分利用了原有的资源、运维经验和自动化工具,也保留了原有运维的管理办法,总体服务质量还略有提升。

今天我的分享就到这里,谢谢大家。



扫一扫微信二维码

随时了解信息侠微报资讯


扫一扫手机端二维码

随时了解信息侠微报资讯

Copyright @ 2018-2019 信息侠一站式数字化转型交流分享平台  版权所有 皖ICP备19006839号-1

上海申馥文化传媒有限公司

安徽申馥商务咨询有限公司

安徽申馥企业服务有限公司

地址:安徽合肥望江西路西湖国际广场D座2345室   网址:www.xinxixia.cn

电话:021-34121111     0551-64388008


友情链接: 安徽省经济和信息化厅 |  江苏省经济和信息化厅  |  浙江省经济和信息化厅  |  上海市经济和信息化委员会  |  四川省经济和信息化厅 |  中华人民共和国工业和信息化部 |  小牛网络 |