首页 > 行业资讯 > 商业银行异构存储迁移实践——迁移实施过程和实践效果篇

商业银行异构存储迁移实践——迁移实施过程和实践效果篇

时间:2023-06-09 来源: 浏览:

商业银行异构存储迁移实践——迁移实施过程和实践效果篇

原创 twt社区 twt企业IT社区
twt企业IT社区

talkwithtrend

talkwithtrend.com社区(即twt社区)官方公众号,持续发布优秀社区原创内容。内容深度服务企业内各方向的架构师、运维主管、开发和运维工程师等IT专业岗位人群,让您时刻和国内企业IT同行保持信息同步。

收录于合集
【摘要】 本文以核心存储扩容项目为背景,通过对部分业务数据向异构存储迁移的方式,实现原有核心存储空间回收与扩容的目标。基于业务特点、基础环境配置、业务连续性和技术成熟度几方面综合考量,最终选择从操作系统层面进行异构存储迁移。尽管该迁移方案与实现技术手段未必是最优最新,但本次数据迁移的成功,为异构存储迁移实践积累了成功的可行性经验,同时笔者也从需求分析及设备选型,迁移方案设计,迁移实施过程和实践效果分别进行了总结与复盘。
全文共分为三个部分 :需求分析及设备选型篇、迁移方案设计篇、迁移实施过程和实践效果篇。 今天推送给大家的是 第三部分: 迁移实施过程和实践效果篇 本篇主要以步骤检查表的形式,供异构存储迁移进行参考避免疏漏。最后分享迁移过程和之后一周的性能数据与业务反馈,并对异构存储整体迁移效果进行经验总结:多参考与论证落地的成功案例、多注意产品差异与安全性的细节、最终选择最适合自己的迁移方式。
点击回顾 《需求分析及设备选型篇》  、 《迁移方案设计篇》

【作者】 张鹏, 任职于某城商行系统专家团队           

一、迁移过程

由于本项目主机的特殊性,并经过上一篇中分享的技术方案验证,因此,异构存储数据迁移过程采用基于LVM进行的异构存储迁移。

在发起数据同步过程中,实时查看同步速度,通过控制并发数控制同步速度,通过下面性能情况可观察到,迁移过程对系统无压力,如下图所示,启动业务后观测运行性能观察不需要进行回退。

图1 异构存储迁移后性能

二、迁移后的效果

对比观测迁移前一周和迁移后一周内的性能数据,询问业务使用以及批量调度的时间,验证异构存储迁移的功能、性能和稳定性情况。
图2 异构存储迁移前一周性能状况

原存储响应时间平均1ms左右,最高4.5ms;日0:00至16:00平均读170MB/,平均写90MB/s,由于源存储容量和性能已达配置上限,读响应时间写响应时间平均在7ms左右,峰值16ms,读响应时间平均1ms,峰值1.9ms。

图3 异构存储迁移后一周性能状况

目标存储响应时间平均0.3-0.6ms左右,峰值1.3ms;写响应时间平均0.9ms,峰值1.89ms,读平均响应时间平均0.2ms,峰值0.4ms。

此外,数据迁移完成后,源端和目标端存储,都可以对承载业务进行容量扩展,源端存储需要将主、从存储以及克隆空间回收,目标端存储扩容需要通过命令行的方式,先进行同步后加入数据保护组中,这一点应该会在未来的图形界面功能中得以实现,相关的案例和操作,我以附件的形式放在文章最后。

以上变更完成后,需要更新自动化切换工具,资源配置登记和应急手册等相关文档,并通知相关人员知晓。

三、迁移复盘与总结

首先,在异构存储迁移过程中,首先通过提前充分的测试,掌握异构存储兼容性、业务连续性要求和维护窗口后,选择最合适的数据迁移方式是十分重要的。异构存储之间并没有过多的并存关系,当然已经具备存储虚拟化网关设备可以很轻松的解决这种异构存储迁移问题,但对于新增存储虚拟化网关同时进行异构存储迁移,业务连续性要求都是一样的,未来会更方便进行迁移,增加了存储虚拟化层维护成本就可以根据自身的情况来选择。部分目标存储本身也具备存储虚拟化能力,不过大多数只适用于数据迁移过程,并不建议日常使用,也涉及到权责问题,不好区分。

其次,请重点关注异构存储迁移前后的操作以及安全性要求的提升。前面提到的使用差异以及扩容中的操作习惯,也都需要在测试阶段解决,不要把问题留到迁移完成之后进行,操作风险性很大,部分操作厂商也只能在测试环境进行评估后给予答复,时效性也不能保证。另外安全性的提升是必要的,但当使用环境的部分基线并没有跟上安全性要求时,需要升级自动化切换平台和应急操作平台的客户端进行升级,部分代码也需要重新进行编译与调整,因此安全性提升带来的变化,需要提前进行设计与考虑,纵使有临时降低安全要求的临时解决方案,也不要忽略这方面的问题。

最后,异构存储迁移的方案还是需要结合同业和厂商推荐的优秀案例,根据自身的人员、业务、架构和技术的综合因素,根据RPO/RTO的要求订制自己的异构存储迁移方案,分享这篇文章也是为了将技术操作的具体过程分享出去作为参考,给自己的迁移方案差缺补漏,保证迁移一次性成功不回退。

四、对整体核心系统改造的作用意义

信贷业务系统国产化高端全闪存储的迁移与上线,不仅标志着项目的顺利完成,也为我行数字化转型提供了更多的选择,为我们的数字化转型之路,坚定了信心、夯实了基础并赢得了空间。在原应用架构完全不变的情况下,交易性能完全不受影响,并预留了更高的性能上涨空间,为业务发展带来了新的机会。信贷系统使用的华为OceanStor Dorado 18500高端全闪存储投产后,高效稳定运行,性能符合预期,坚定了我们对核心设备国产化的信心,在数字化转型之中拥有更多更好的技术选择。在项目实施中,实施团队所展现出勤恳的工作态度和突出的专业能力进一步增强了我们对高端国内厂商交付能力的信心。

行内人员在项目实施过程中,提升了对全闪存产品技术的理论认识及实操能力,软实力也得到了提示,这也是数字化转型的必要条件,通过与国内领先厂商的合作,增进了相互了解,健全了我行的数字化生态,为我行持续的数字化转型夯实了基础。

在信贷系统迁移之后,更多的核心存储承载系统,将会参考本项目进行存储迁移,解决原有系统高昂的维护成本与复杂的扩容方案等难题,国产化高端存储三中心架构,支持未来3-5年业务发展,为后续的数字化转型中,选择分布式架构、云平台等技术路线预留充足的转型发展时间和性能提升空间,加快了技术迭代速度,向更为绿色、节能、高效、稳定的数据中心演进。

有任何问题,可以点击文末 阅读原文 到社区原文下交流

觉得本文有用,请 转发、点赞 或点击“ ”,让更多同行看到

 资料/文章推荐:

  • 某城商行生产环境基于华为全闪存储国产化替代实践经验分享

  • 从存量数据现状看金融企业存储平台三个走向 | 趋势解读

  • 解析国产数据库架构、应用场景及其存储适配

欢迎关注社区  “存储”技术主题  ,将会不断更新优质资料、文章。地址: https://www.talkwithtrend.com/Channel/179

下载 twt 社区客户端 APP

长按识别二维码即可下载

或到应用商店搜索“twt”

长按二维码关注公众号

*本公众号所发布内容仅代表作者观点,不代表社区立场

版权:如无特殊注明,文章转载自网络,侵权请联系cnmhg168#163.com删除!文件均为网友上传,仅供研究和学习使用,务必24小时内删除。
相关推荐