百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

厉害了!贵州易鲸捷攻克业界最棘手难题,拿下分布式数据库关键技术专利

mhr18 2025-03-02 18:06 68 浏览 0 评论

作为贵州贵阳本地成长起来的标杆企业,贵州易鲸捷信息技术有限公司日前从美国商务专利局获得了“混合乐观锁和悲观锁的数据库事务并发控制”发明专利证书。这项技术攻克了全球分布式数据库领域最难解决的业内难题之一,即分布式数据库最棘手的多用户并发访问冲突问题。



图为贵州易鲸捷获取的美国专利。



据悉,易鲸捷自2015年成立就迈入分布式数据库“新赛道”,成为全球最早推出下一代融合型(HTAP)分布式数据库的企业。依托贵州、贵阳发展大数据产业的天然沃土和优势,易鲸捷成长为了一家技术突出的国产数据库厂商。


现有数据库技术中,悲观锁和乐观锁是互斥的两种并发控制技术,采用了悲观锁实现的数据库,便不能同时使用乐观锁机制,反之亦然。而此次贵州易鲸捷获得的这项专利,是基于乐观锁机制,融合了悲观锁功能,很大程度上解决了各种场景下并发控制的性能问题。


在国际厂商把控全球数据库市场份额的当下,以贵州易鲸捷等拥有自主可控核心技术的国内数据库厂商,通过布局分布式数据库的新赛道努力追赶,打通了我国关键行业分布式数据库技术的最后一公里。


攻克重大技术难题


数据库技术诞生于上世纪60年代,与中间件、操作系统并称为全球三大基础软件技术。起初的数据库技术是以垂直扩展为理念进行设计的集中式数据库,而在集中式数据库技术上,我国起步相对较晚,一直处于追赶状态,目前仍与国外顶级厂商存在巨大差距。


不过,在过去十多年互联网和云计算的共同推动下,分布式技术得到了长足发展,为新一代分布式数据库的发展提供了新的技术和应用场景支撑,而分布式数据库作为未来数据库技术发展的主赛道初露端倪。目前我国已涌现出一批极具研发实力的分布式数据库厂商,而以贵州易鲸捷为代表的头部厂商此次没有输在“起跑线”上。


虽然贵州易鲸捷成立的时间不长,但其核心研发团队却拥有30余年的技术沉淀与传承,并在金融数据库核心业务领域打造出了“易鲸捷模式”,上述发明专利便是贵州易鲸捷在银行核心交易系统项目中不断实践与积累所获得的重大技术突破。


具体来看,在数据库中,当多个用户/进程/线程同时进行操作,要保证事务的一致性、隔离性,以及最大程度的并发是数据库开发者常常要考虑的难题,如果并发控制不善,将会导致数据的脏读(读到未提交的数据)、幻读,甚至造成数据更新丢失的情况。


据贵州易鲸捷银行项目研发负责人介绍,乐观锁并发控制(即OCC,全称Optimistic Concurrency Control)是一种解决写写冲突的无锁并发控制技术,主要适用于低数据争用的环境。但银行核心业务是一种典型的高并发OLTP场景,根据银行体量不同,TPS高峰期会在几百几千甚至更高级别。这意味着,在同一个时刻,银行某个账户大概率会出现被多个并发同时访问或更改,而银行核心业务场景对交易的成功率一般要求为99.99%乃至更高,即一万笔交易中只允许失败一笔。


该研发负责人进一步表示,在乐观锁并发控制模式下,由于冲突是在事务提交时检查,如果检查到失败事务即报错,这虽然保证了事务的一致性,但会导致交易失败率增加。因此,贵州易鲸捷针对银行核心业务打造的QianBase数据库,在支持OCC的基础上,又增加了“悲观锁”并发控制技术。在“悲观锁”并发控制模式下,发生冲突的修改会进行等待,直到另一个事务提交成功,被等待的修改随之也会继续执行,这大大增加了银行核心业务的交易成功率。


目前,贵州易鲸捷QianBase系列数据库可同时支持乐观锁与悲观锁两种并发访问控制技术,适用于不同的业务场景,而这项技术已在贵阳银行沙箱项目与贵阳农商银行双库并行项目中获得应用。


贵州易鲸捷CEO武新表示,对易鲸捷此次获得的分布式数据库核心技术美国专利,用悲观锁与乐观锁混合模式,优雅的解决了分布式数据库最棘手的多用户并发访问冲突问题,这是全球分布式数据库领域最难解决的业内难题之一,为支持复杂业务场景下的长事务并发奠定了基础,这也是分布式数据库能够透明支撑核心交易系统的关键技术之一。


据了解,除此次从美国商标专利局获取的这项发明专利外,贵州易鲸捷目前还有多个国内外专利在申请过程中,其中覆盖了数据库产品的计算层、连接层和分布式事务管理等模块/组件。


聚焦银行核心业务


在当前全球数据库市场中,以微软、亚马逊、Oracle等为首的国际厂商处于垄断地位。Gartner数据显示,2021年此三家数据库巨头分别占有24%、23.9%和20.6%的市场份额。在国内市场中,近年来,我国多家金融机构单一来源均采购的是国外数据库厂商产品。


数据库行业专业人士表示,目前国内金融行业核心交易系统数据库采用Oracle产品和IBM小型机的比例在80%以上,而基于国内数据库的银行核心交易系统数量还不足10家,尚处于探索阶段。


贵阳银行与贵阳农商银行便是首批“尝鲜”的企业,其核心交易系统试点项目均由贵州易鲸捷研发。截至目前,贵州易鲸捷已将首创的双库并行技术应用到了贵阳农商银行项目中,使得银行前端的柜面交易、支付平台,以及核心交易的完整核心系统,均可并行在易鲸捷数据库与Oracle之上,互为灾备且秒级互相切换,真正做到了保障国家信息安全与银行业务安全。


此外,贵阳银行核心交易系统沙箱项目从2020年4月1日上线至2021年3月项目成功结项,始终保持稳定运行,交易成功率在99.999%以上,准确率达到100%。在此基础上,贵阳银行启动了全新一代全栈国产银行核心业务系统建设,采用易鲸捷新一代云原生分布式数据库QianBase作为底层技术支撑,通过系统调优,易鲸捷数据库已完成与国产IT底座(华为鲲鹏、飞腾、长城、麒麟、东方通等)的深度适配和优化,系统各项指标在国产IT底座上已达到国内领先水平。


不仅如此,贵州易鲸捷公司还聚拢了一批国内优秀的数据库领域技术专家,实现了团队研发能力的快速提升,在产品架构设计和代码研发能力上形成一支具有强劲实力的团队。


武新表示,在过去的30年里,数据库技术和市场已形成了高度垄断,而云化、分布式架构是打破“旧世界”的突破口。未来数据库比拼的是综合实力,主要包括产品能力、真实场景打磨和从传统IOE架构平滑迁移到分布式架构的方法和路径,以及类似金融核心系统的端到端的全栈国产化解决方案。目前贵州易鲸捷在金融领域打造的“易鲸捷模式”,可以帮助各类金融机构大大降低试错成本,具有重大标杆意义和推广价值。

来源:中国网

编辑:文卓異

责编:王 营

审核:谢 涛

相关推荐

【预警通报】关于WebLogic存在远程代码执行高危漏洞的预警通报

近日,Oracle官方发布了2021年1月关键补丁更新公告CPU(CriticalPatchUpdate),共修复了包括CVE-2021-2109(WeblogicServer远程代码执行漏洞)...

医院信息系统突发应急演练记录(医院信息化应急演练)

信息系统突发事件应急预案演练记录演练内容信息系统突发事件应急预案演练参与人员信息科参与科室:全院各部门日期xxxx-xx-xx时间20:00至24:00地点信息科记录:xxx1、...

一文掌握怎么利用Shell+Python实现完美版的多数据源备份程序

简介:在当今数字化时代,无论是企业还是个人,数据的安全性和业务的连续性都是至关重要的。数据一旦丢失,可能会造成无法估量的损失。因此,如何有效地对分布在不同位置的数据进行备份,尤其是异地备份,成为了一个...

docker搭建系统环境(docker搭建centos)

Docker安装(CentOS7)1.卸载旧版Docker#检查已安装版本yumlistinstalled|grepdocker#卸载旧版本yumremove-ydocker.x...

基础篇:数据库 SQL 入门教程(sql数据库入门书籍推荐)

SQL介绍什么是SQLSQL指结构化查询语言,是用于访问和处理数据库的标准的计算机语言。它使我们有能力访问数据库,可与多种数据库程序协同工作,如MSAccess、DB2、Informix、M...

Java21杀手级新特性!3行代码性能翻倍

导语某券商系统用这招,交易延迟从12ms降到0.8ms!本文揭秘Oracle官方未公开的Record模式匹配+虚拟线程深度优化+向量API神操作,代码量直降70%!一、Record模式匹配(代码量↓8...

一文读懂JDK21的虚拟线程(java虚拟线程)

概述JDK21已于2023年9月19日发布,作为Oracle标准Java实现的一个LTS版本发布,发布了15想新特性,其中虚拟线程呼声较高。虚拟线程是JDK21中引入的一项重要特性,它是一种轻量级的...

效率!MacOS下超级好用的Linux虚拟工具:Lima

对于MacOS用户来说,搭建Linux虚拟环境一直是件让人头疼的事。无论是VirtualBox还是商业的VMware,都显得过于笨重且配置复杂。今天,我们要介绍一个轻巧方便的纯命令行Linux虚拟工具...

所谓SaaS(所谓三维目标一般都应包括)

2010年前后,一个科技媒体的主编写一些关于云计算的概念性问题,就可以作为头版头条了。那时候的云计算,更多的还停留在一些概念性的问题上。而基于云计算而生的SaaS更是“养在深闺人未识”,一度成为被IT...

ORA-00600 「25027」 「x」报错(报错0xc0000001)

问题现象:在用到LOB大对象的业务中,进行数据的插入,失败了,在报警文件中报错:ORA-00600:内部错误代码,参数:[25027],[10],[0],[],[],[],[],[...

安卓7源码编译(安卓源码编译环境lunch失败,uname命令找不到)

前面已经下载好源码了,接下来是下载手机对应的二进制驱动执行编译源码命令下载厂商驱动https://developers.google.com/android/drivers?hl=zh-cn搜索NGI...

编译安卓源码(编译安卓源码 电脑配置)

前面已经下载好源码了,接下来是下载手机对应的二进制驱动执行编译源码命令下载厂商驱动https://developers.google.com/android/drivers?hl=zh-cn搜索NGI...

360 Vulcan Team首战告捷 以17.5万美金强势领跑2019“天府杯“

2019年11月16日,由360集团、百度、腾讯、阿里巴巴、清华大学与中科院等多家企业和研究机构在成都联合主办了2019“天府杯”国际网络安全大赛暨2019天府国际网络安全高峰论坛。而开幕当日最激荡人...

Syslog 日志分析与异常检测技巧(syslog发送日志配置)

系统日志包含有助于分析网络设备整体运行状况的重要信息。然而,理解并从中提取有效数据往往颇具挑战。本文将详解从基础命令行工具到专业日志管理软件的全流程分析技巧,助你高效挖掘Syslog日志价值。Gr...

从Oracle演进看数据库技术的发展(从oracle演进看数据库技术的发展的过程)

数据库技术发展本质上是应用需求驱动与基础架构演进的双向奔赴,如何分析其技术发展的脉络和方向?考虑到oracle数据库仍然是这个领域的王者,以其为例,管中窥豹,对其从Oracle8i到23ai版本的核...

取消回复欢迎 发表评论: