openGauss DataPod资源池化获金融科技产业联盟2023年十佳课题

NEWS

近日,由中国人民银行指导的北京金融科技产业联盟公布2023年度十佳课题评选结果,由openGauss社区牵头的《资源池化数据库金融关键业务场景技术研究》荣获了“北京金融科技产业联盟2023年度十佳课题。

eb2c0d7b160ed74439a5b520f3f26927.jpeg

2023年,openGauss发布5.0.0和5.1.0版本,实现 DataPod、DataKit 两大架构创新,分层解耦、资源池化,持续引领数据库技术发展方向。DataPod资源池化架构推出后,就深入金融关键业务应用场景,得到了金融行业客户的支持和赞誉,并作为技术创新项目获此殊荣,标志着openGauss DataPod资源池化架构在在金融场景的具体实践获得业界认可。

当前金融行业数据库转型逐步向核心关键业务深入,在持续稳定可靠、性能、资源高效利用促进节能减排等方面面临的挑战越来越大。资源池化数据库因其打破传统通过架构和全栈优化快速高效、低成本地实现数据库全栈能力倍增,因而成为全球数据库技术发展的重要热点方向。由openGauss社区牵头,中国民生银行股份有限公司、华西证券股份有限公司、兴业银行股份有限公司联合参与下,《资源池化数据库金融关键业务场景技术研究》课题应运而生。

本课题洞察了银行和证券关键业务场景需求,完成了数据库资源池化架构在提升可靠性、单库性能以及优化资源使用三方面技术原理的研究,并结合银行和证券业应用场景进行了测试验证,总结资源池化数据库的价值,改进方向,为实现金融核心业务数据库转型替换提供参考指导。 

根据技术论证和验证对比结果,资源池化架构在可靠性、性能、资源利用率综合能力较大提升,解决了传统架构要在性能和可靠性之间做取舍,或以硬件数量换取性能和可靠性的“不可能三角”,数据库全栈能力有较大提升:

一是可靠性方面。共享存储一写多读架构在不影响性能的情况下保障不丢失数据,共享磁盘锁技术将计算实例故障恢复时间缩短了一半,防止脑裂的同时实现两节点起配,降低了最小集群规格;通过与企业级全闪存存储的全栈优化解决了磁盘亚健康、数据快速恢复重构等问题,降低或消除了关键部件故障和恢复过程中的业务中断和性能影响;从而构建了以降低故障影响和冗余为核心的可靠性体系,契合金融业务对长期稳定运行的要求。

二是资源利用率方面。得益于性能扩展和可靠性冗余不再需要存算捆绑,资源池化数据库计算资源利用率提升33%、存储利用率提升50%,可实现计算和存储资源的按需配置,对金融企业降低机房供电需求,实现绿色金融节能减排有重大意义。

三是性能方面。在银行业务生产配置性能对比中,资源池化数据库因不需要牺牲性能满足可靠性要求,因而较非资源池化架构性能提升1.6倍,显示了出色的均衡能力。在证券交易型业务模拟测试中,资源池化数据库相较于传统的非池化数据库在性能上提升35% ,在延迟上降低12%以上。在极限性能测试中,通过采用鲲鹏服务器NUMA亲和/高性能原子指令、数据库用户态文件系统、NoF存储网络、全闪存存储等全栈优化的资源池化数据库与非池化数据库性能持平,说明资源池化数据库全栈优化可以解决存算分离架构的性能瓶颈,为架构优化扫清了障碍。

综合来看,资源池化数据库是一种跳出传统优化思路的尝试,在提升数据库单库能力的同时,也消除了使用创新基础设施的性能、成本障碍,为进一步通过全栈优化提升数据库全栈能力创造了条件。


资源池化数据库对于实现金融业务数据库长期稳定运行,提升单库性能降低迁移难度以及提升资源利用率实现节能减排有很大帮助,随着技术的成熟和产品的丰富,在金融业务中实现数据库平滑迁移、减少数据库拆分、支持低时延等业务需求有较广泛的使用前景。


本次课题基于openGauss开源数据库开展,openGauss数据库代表了当前国内资源池化数据库的主流水平。未来,openGauss社区将在金融行业数字化转型战略及数据库技术金融应用规范新要求背景下,进一步推进资源池化架构创新,通过灵活的架构与底层根技术突破,openGauss真正实现软硬协同,全栈融合、敏捷创新,赋能千行万业。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/666871.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

vulhub中 Apache Airflow Celery 消息中间件命令执行漏洞复现(CVE-2020-11981)

Apache Airflow是一款开源的,分布式任务调度框架。在其1.10.10版本及以前,如果攻击者控制了Celery的消息中间件(如Redis/RabbitMQ),将可以通过控制消息,在Worker进程中执行任意命令。 1.利用这个漏洞需要控…

全流程机器视觉工程开发(四)PaddleDetection C++工程化应用部署到本地DLL以供软件调用

前言 我们之前跑了一个yolo的模型,然后我们通过PaddleDetection的库对这个模型进行了一定程度的调用,但是那个调用还是基于命令的调用,这样的库首先第一个不能部署到客户的电脑上,第二个用起来也非常不方便,那么我们可…

Java八大常用排序算法

1冒泡排序 对于冒泡排序相信我们都比较熟悉了,其核心思想就是相邻元素两两比较,把较大的元素放到后面,在一轮比较完成之后,最大的元素就位于最后一个位置了,就好像是气泡,慢慢的浮出了水面一样 Jave 实现 …

2024 RTE行业(实时互动行业)人才发展学习总结

解决方案 人才画像 开发者人才素质要求: 具备多个领域的技术知识注重团队合作,具备协作能力以用户为导向的用户体验意识具备创新思维和解决问题的能力需快速响应行业变化和持续的学习能力具备项目管理能力 学习和吸收新知识的渠道 RTE人才分类

操作系统透视:从历史沿革到现代应用,剖析Linux与网站服务架构

目录 操作系统 windows macos Linux 服务器搭建网站 关于解释器的流程 curl -I命令 名词解释 dos bash/terminal,(终端) nginx/apache(Linux平台下的) iis(Windows平台下的) GUI(图形化管理接口&#xff…

【51单片机系列】应用设计——8路抢答器的设计

51单片机应用——8路抢答器设计 文章设计文件及代码:资源链接。 文章目录 要求:设计思路软件设计仿真结果 要求: (1) 按下”开始“按键后才开始抢答,且抢答允许指示灯亮; (2&…

聚道云软件连接器助力餐饮企业实现数字化管理

客户介绍 某餐饮有限责任公司是一家历史悠久、口碑良好的连锁餐饮公司。公司总部位于北京市,拥有多家门店,覆盖了北京市内的各个区域。每家门店都以独特的装修风格和优雅的环境为顾客营造温馨舒适的用餐氛围。作为一家知名的连锁餐饮公司,在…

过好“苏州年”!沉浸式名城非遗文化体验展 2月10日正式启幕

擦亮非遗文化底色,绘就历史文化名城金名片 天工开画卷,苏作见匠心,在2024龙年到来之际,“匠海拾遗-沉浸式名城非遗文化体验展” 将于2月10日在江苏省省级文物保护单位——江苏按察使署旧址内举办。此次非物质文化遗产(…

记录Git无法连接Github(443报错)的一种可能——代理问题

参考文章: Git安装配置与使用(超级详细)_git配置-CSDN博客 github代理报错_valueerror: unable to determine socks version from-CSDN博客 速通 如果在使用 git 时遇到了这样的报错: OpenSSL SSL_connect: SSL_ERROR_SYSCAL…

机器学习周报第二十八周 PINNs2

文章目录 week28 PINNs2摘要Abstract一、Lipschitz条件二、文献阅读1. 题目数据驱动的偏微分方程2. 连续时间模型3. 离散时间模型4.结论 三、CLSTM1. 任务要求2. 实验结果3. 实验代码3.1模型构建3.2训练过程代码 小结参考文献 week28 PINNs2 摘要 本文主要讨论PINN。本文简要…

机器学习 | 解析聚类算法在数据检测中的应用

目录 初识聚类算法 聚类算法实现流程 模型评估 算法优化 特征降维 探究用户对物品类别的喜好细分(实操) 初识聚类算法 聚类算法是一种无监督学习方法,用于将数据集中的对象按照相似性分组。它旨在发现数据中的内在结构和模式,将具有相似特征的数据…

MySQL进阶之锁(行锁,间隙锁,临键锁)

行级锁 介绍 行级锁,每次操作锁住对应的行数据。锁定粒度最小,发生锁冲突的概率最低,并发度最高。应用在 InnoDB存储引擎中。 InnoDB的数据是基于索引组织的,行锁是通过对索引上的索引项加锁来实现的,而不是对记录加…

Linux——权限管理

1、ACL权限 在普通权限中,用户对文件只有三种身份,就是属主、属组和其他人;每种用户身份拥有读(read)、写(write)和执行(execute)三种权限。但是在实际工作中&#xff0…

uniapp使用u-popup组件弹窗出现页面还可滑动

*1、问题所在: 弹窗遮罩层出现了页面依旧可以上下滑动 2、要求: 为了用户更好交互体验,弹窗出现后应禁止页面往下滑动 3、实现思路: 在弹窗盒子外层添加个阻止触摸冒泡事件,使用touchmove.stop.prevent 4、代码如下&#xff…

Django学习记录01

1.项目结构 djangoProject02 ├── manage.py 【项目的管理,启动项目、创建app、数据管理】【不要动】【常常用】 └── jangoProject02 ├── __init__.py ├── settings.py 【项目配置】 【常常修改】 ├── urls.py …

软件IIC读取MPU6050

软件IIC读取MPU6050 最终现象一、GY-521 MPU6050三维角度传感器简介二、程序分析1、mpu6050.c2、MPU6050_reg.h 最终现象 一、GY-521 MPU6050三维角度传感器简介 一共八个引脚,一般只用到四个,其余的我也没有试过。 VCC、GND分别接5V电源和地&#xff1b…

如何用ETL工具实现API调用

一、API调用的好处 API调用有很多好处,下面列举了几个主要的优势: 模块化和可重用性:API调用使得软件开发过程更加模块化和可用。通过将功能封装在API中,可以将其用作独立的模块,并在不同的应用程序或系统中进行重复使…

父类之王“Object”类和内部类

👨‍💻作者简介:👨🏻‍🎓告别,今天 📔高质量专栏 :☕java趣味之旅 欢迎🙏点赞🗣️评论📥收藏💓关注 💖衷心的希…

NLP深入学习:《A Survey of Large Language Models》详细学习(一)

文章目录 1. 前言2. 摘要部分3. 引言部分4. Overview 部分4.1 LLMs 背景4.2 GPT 系列模型的技术演变 5. 参考 1. 前言 最近正在读这边 LLM 论文的综述,鉴于读得费劲,如果将整个论文读完再来写会比较费劲。当前采取的策略是部分内容走读记录,…

3 编辑器(Vim)

1.完成 vimtutor。备注:它在一个 80x24(80 列,24 行) 终端窗口看起来效果最好。 2.下载我们提供的 vimrc,然后把它保存到 ~/.vimrc。 通读这个注释详细的文件 (用 Vim!), 然后观察 …