某人寿保险公司基础架构云化与小机数仓下移实践

随着数据中心 IT 基础架构的不断演进,云计算、大数据、移动互联的需求日益高涨,快速敏捷、易于维护以及扩展性,逐渐成为金融机构在升级数据中心时重点考虑的方面。

某人寿保险公司(以下简称“客户”)过往采用传统三层架构,即 IBM Power/x86 + FC SAN + 集中式存储的组合,在使用多年后面临设备老旧、灵活性与性能无法及时满足业务变化等问题。另外,传统架构也存在使用专用硬件及网络、存储控制器集中、架构及运维复杂等问题。

随着分布式技术、软件定义技术的发展,该人寿保险公司于 2018 年开始进行云化转型、分布式技术的路线探索。

聚焦超融合厂商存储自研能力,选择 SmartX 逐步扩容

为了更好的支撑数字化转型战略,客户计划采用自建云的方式,并对公有云下迁、开源云平台、超融合架构等技术路线进行对比后,认可超融合架构小规模起步、资源快速交付、按需灵活拓展等优势,并重点关注超融合厂商的技术能力和自主研发能力。

在选型过程中,志凌海纳 SmartX 凭借核心自研能力、本地服务支持响应能力、以及在 POC 过程中展示出的良好性能、稳定性脱颖而出,获得了小批量部署的机会。同时,SmartX 超融合集群的快速交付能力也有效支持客户旗下养老公司筹建时的 IT 基础环境搭建。

自 2019 年合作以来,客户(含养老公司)共采用 45 节点 SmartX 超融合搭建了 8 套集群,承载团险核心系统、公司特色业务系统、OA、部分投资交易系统以及 Oracle、MySQL、Mongo 数据库,并通过 CloudTower (SmartX 统一管理平台)统一管理。

由于 SmartX 超融合具备小规模起步、按需灵活扩展的特性,客户可以从容应对业务需求增加所对应的资源增长,不必过早规划后续的资源规模,更不必为了满足一段时间后的需求而提早投资。这样的灵活扩容方案,可以有效提升资源使用效能,真正做到“按需扩容”。

图片

开拓超融合应用场景,提升数据仓库跑批性能

在使用 SmartX 超融合集群支撑开发测试、生产以及轻量型数据库系统近 4 年后,客户希望进一步验证使用 SmartX 超融合高性能集群(NVMe 作为节点缓存,搭配 25Gb RDMA 存储网络)是否可以支撑其原本运行在 IBM 小型机 + 集中式存储上的 Oralce 数据仓库系统,为后续逐步淘汰老旧 Power 服务器做前期验证。

测试背景

客户在生产环境使用 Oracle 数据仓库为 Crystal Reports(水晶报表)系统提供数据加工和数据处理。随着业务量和数据量的增长,Oracle 数据仓库跑批的性能越来越差。跑批工作一般从凌晨开始到早上 6 点结束,考虑到后期数据量还会继续增大,可能会继续增加跑批时间,影响白天业务正常开展。因此,客户希望能够优化基础架构,缩短数仓跑批运行时间。

同时,生产环境的数据仓库还部署在 IBM 小型机上,虽然运行较为稳定,但由于小型机使用年限较长,考虑到设备运行风险及运维复杂度等问题,客户希望进行小机下移 x86 的可能性验证,以应对未来的业务增长。

测试目标与方法

在数据量完全相同的情况下,对比生产环境现有方案与基于 SmartX 超融合的 Oracle 数据仓库跑批时间,一共进行 3 轮跑批测试,时间越短表现越优异。

  • SmartX 超融合 VS 小机 + 集中存储。 

  • Informatica(ETL)将生产数据导入 Oracle DW。

  • 验证 Oracle DW 报表跑批性能。

环境与配置

图片

测试数据

图片

测试结论

  • 经过多轮测试验证,SmartX 超融合架构相比原生产架构的小机 + 集中式存储,在进行 Oracle 数据仓库跑批时有明显的性能提升,跑批时间可有效缩短 36%,并得到客户认可。

  • 验证了 Oracle 数据仓库从小机下移 x86 服务器的可行性,为后续使用 SmartX 超融合替换小机 + 集中式存储,提供了量化参考依据。

  • 提高了资源利用率—— Oracle 数据仓库跑批业务通常是在夜间运行,超融合架构在白天可以支撑其他应用和数据库等业务。这样,基础架构硬件资源可以得到充分的复用,最大化资源利用效率。

系统“敏”“稳”双提升,IT 基础架构持续演进

在探索超融合应用场景的历程中,客户始终以业务系统稳定运行、数据可靠安全为前提,对 IT 基础架构的演进不断尝试和突破,取得了如下收益:

  • 提升 IT 基础架构的敏捷性和弹性伸缩能力,实现资源的集中统一管理,避免资源浪费,同时提升了 IT 整体工作效率和管理效率,节约人力成本。

  • 稳定、弹性拓展的 IT 基础架构可以支持业务高并发,应对突发性业务量变化,提高了业务的可用性及响应能力。敏捷开发可以支撑业务快速走向市场,迅速抢占先机。

  • 降低了整体运营成本与运营风险,提高业务连续性与安全性,进而提升了企业数字化转型的核心竞争力。

  • 数据仓库的性能提升带来了业务流程的优化,可以更好预测未来业务趋势与风险,提升了金融机构服务社会的满意度。

当前客户正在逐步将 Oracle RAC、数仓等系统迁移至 SmartX 超融合高性能集群中,充分发挥集群高性能优势。未来将继续深化与 SmartX 在其他产品领域的合作,进一步完善企业私有云架构,如网络流量可视化、零信任网络安全等,并构建更加可靠的容灾体系。

欲了解更多金融行业应用场景探索实践,点击链接一键获取《金融核心生产业务场景探索文章合集》

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/591594.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

PS插件一键生成超治愈向日葵花海

金黄色的向日葵总能给人带来治愈的感觉,仿佛在这里能够疗愈心灵所有的伤口。今天我们通过START AI来生成一片美丽的向日葵花海~ 这是小编使用的关键词,负面词需要填写你不想要拥有的,能够让生成的结果更贴合你的想法 最后的生成效果就如下图…

IC工程师级别与薪资是怎样的?资深工程师一文带你了解清楚

入行IC之后,想必大家更关心的就是工程师薪资和级别,因为入行的大多数也是工程师。 国际的一流企业基本上工程师分为以下几个级别:普通工程师,资深工程师,主管工程师,资深主管,总工, 资深总工&am…

电子电器架构(E/E)演化 —— 车载以太网

电子电器架构(E/E)演化 —— 车载以太网 我是穿拖鞋的汉子,魔都中坚持长期主义的汽车电子工程师。 本文13000字。 老规矩,分享一段喜欢的文字,避免自己成为高知识低文化的工程师: 屏蔽力是信息过载时代一…

笔记1:基于锚框(先验框)的目标检测

一、边缘框(bounding box) 1.1 定义 边缘框:真实标注的物体位置 2.1 表示方式 1、(x1,y1)和(x2,y2) 2、(x1,y1)和w,h 二、锚框(anchor box)/先验框(prior bounding box) 2.1 定义 对边缘…

Django 学习教程- Django模板(Template)

系列 Django 学习教程-介绍与安装-CSDN博客 Django 学习教程- Hello world入门案例-CSDN博客 前言 在上一章节中我们使用django.http.HttpResponse() 来输出 "Hello World!"。该方式将数据与视图混合在一起,不符合 Django 的 MTV 思想。 本…

Linux network — 网络层收发包流程及 Netfilter 框架浅析

Linux network — 网络层收发包流程及 Netfilter 框架浅析 1. 前言2. 基础网络知识2.1 网络分层模型2.2 数据包协议分层2.3 sk_buff 结构2.4 收发包整体框架 3. 网络层(IPv4)收发包流程4. Netfilter 框架4.1 IPv4 网络层的 Netfilter Hook 点4.2 iptable…

算法——队列+宽搜(BFS)

队列这种数据结构大都服务于一个算法——宽搜(BFS)。宽搜还可以运用到二叉树、图、迷宫最短路径问题、拓扑排序等等 N叉数的层序遍历 N叉树的层序遍历 题目解析 给定一个 N 叉树,返回其节点值的_层序遍历_。(即从左到右&#…

使用Wireshark进行网络流量分析

目录 Wireshark是什么? 数据包筛选 筛选指定ip 使用逻辑运算符筛选 HTTP模式过滤 端口筛选 协议筛选 包长度筛选 数据包搜索 数据流分析 数据包导出 Wireshark是什么? 通过Wireshark,我们可以捕获和分析网络数据包,查看…

【Maven】工程依赖下载失败错误解决

在使用 Maven 构建项目时,可能会发生依赖项下载错误的情况,主要原因有以下几种: 下载依赖时出现网络故障或仓库服务器宕机等原因,导致无法连接至 Maven 仓库,从而无法下载依赖。 依赖项的版本号或配置文件中的版本号错…

SPI

一、简介 SPI是一种同步、全双工、主从式接口。来自主机或从机的数据在 时钟上升沿或下降沿同步。主机和从机可以同时传输数据。SPI接 口可以是3线式或4线式。 MOSI(Master Output Slave Input) – 主设备输出/从设备输入信号;MISO(Master Input Slave Output) – 主…

经典卷积神经网络-ResNet

经典卷积神经网络-ResNet 一、背景介绍 残差神经网络(ResNet)是由微软研究院的何恺明、张祥雨、任少卿、孙剑等人提出的。ResNet 在2015 年的ILSVRC(ImageNet Large Scale Visual Recognition Challenge)中取得了冠军。残差神经网络的主要贡献是发现了…

Nginx 反向代理负载均衡

Nginx 反向代理负载均衡 普通的负载均衡软件,如 LVS,其实现的功能只是对请求数据包的转发、传递,从负载均衡下的节点服务器来看,接收到的请求还是来自访问负载均衡器的客户端的真实用户;而反向代理就不一样了&#xf…

Android混淆那些事

前言 作为一个Android开发,大家或多或少都有一些关于混淆的了解(毕竟披个纱布也比裸奔要好的多吧)。混淆的概念虽然容易理解,但相信大多数开发可能还是在网上搜索通用配置后通过C-V大法接入到自己的项目中,这也使得混…

canvas绘制网格线示例

查看专栏目录 canvas示例教程100专栏,提供canvas的基础知识,高级动画,相关应用扩展等信息。canvas作为html的一部分,是图像图标地图可视化的一个重要的基础,学好了canvas,在其他的一些应用上将会起到非常重…

docker 部署教学版本

文章目录 一、docker使用场景及常用命令1)docker使用场景2)rocky8(centos8)安装 docker3)docker 常用命令补充常用命令 二、 单独部署每个镜像,部署spring 应用镜像推荐(2023-12-18)1、 安装使用 mysql1.1 …

高可用解决方案 Keepalived 概述

概述 Keepalived 介绍 Keepalived 是 Linux 下一个轻量级别的高可用解决方案,通过 **VRRP 协议(虚拟路由冗余协议)**来实现服务或者网络的高可用,可以利用其来解决单点故障。 起初是为 LVS 设计的,一个 LVS 服务会有 …

计算机毕业论文内容参考|基于智能搜索引擎的图书管理系统的设计与实现

文章目录 摘要前言绪论课题背景国内外现状与趋势课题内容相关技术与方法介绍系统分析系统设计系统实现系统测试总结与展望摘要 本文介绍了基于智能搜索引擎的图书管理系统的设计与实现。该系统旨在提供一个高效、智能化的图书管理平台,帮助用户更快、更准确地找到所需的图书资…

2024年PMP报考需要什么条件?怎么报名?

一、PMP是什么 PMP 是项目管理的入门级证书,全称是项目管理专业人士资格认证,由美国项目管理协会(PMI)举办的,受到全球200多个国家的认可,从1999 年到现在已经有20多年发展历史了。 顾名思义,…

【大数据面试知识点】分区器Partitioner:HashPartitioner、RangePartitioner

Spark HashParitioner的弊端是什么? HashPartitioner分区的原理很简单,对于给定的key,计算其hashCode,并除于分区的个数取余,如果余数小于0,则用余数分区的个数,最后返回的值就是这个key所属的…

阶段十-分布式-nginx服务器

一、Nginx简介 Nginx 是高性能的 HTTP 和反向代理的服务器,处理高并发能力是十分强大的,能经受高负载的考验,有报告表明能支持高达 50,000 个并发连接数。tomcat并发数量理论值是500,实际也就300左右。 1.2 正向代理 正向代理代理的是客户…