金融数据库的战场,太平洋保险和OceanBase打了场胜仗

[导读]替代从边缘走向核心,也从平替走到升级。

文丨刘雨琦

“数据库的国产替代,必须经过严格的考虑,保证不会出错,所以大多数企业的领导层选择按兵不动或者简单扩容。因为不换就不会错,选了很久如果选错,还可能会出现重大事故。”

某银行数据库技术人员曾对光锥智能一语道出了在数据库的国产替代中的核心难点。“真的要大刀阔斧的改革,需要领导层有魄力和决心,否则只能是边缘试探。”

下定决心全面替换,一方面是企业对国产数据库有足够的开放程度,另一方面,也要国产数据库有超过Oracle等老牌数据库的性能。一次改革,不仅完成“平替”,更能升级,帮助企业降本增效。

“数据库的国产替代,正在从边缘的OA系统,深入到核心的业务系统。如今国产数据库占20%的市场份额,传统数据库占80%的份额,这样的‘二八’分布将在三年之内颠倒过来。”Oceanbase副总裁王爽认为,国产数据库已经经历了磨砺产品性能、攻克替代难关的过程,将在三年内加速进入全面升级的阶段。

据光锥智能了解到,很多企业制定了内部战略,要在2027年做到数据库的“应替尽替”。国内企业逐渐对国产数据库重新认知并抱有开放态度,尤其在数据库最核心的金融场景,也有更多企业愿意“押注”在国产数据库上。国产数据库,从金融行业里“杀”出了一条路。

“没有经历过金融行业历练的数据库,不算合格的数据库。”

一直以来,金融场景都是数据库的最大练兵场,不仅是因为数据量庞大,同时,交易、分析、事故更加复杂,高频高并发是金融数据库的特性,更因为金融行业本身7×24小时不间断,对数据库安全性、稳定性都有更高要求,运维也更加复杂。

王爽举了一个例子:“以前银行的交易来自于营业网点,存钱、取钱、转钱,但现在已经互联网化了,频率大大增加。以前一年去营业厅也就三五次,但现在用户每天都在交易,每天点外卖、坐公交/地铁,每刷一次都会产生数据。这就造成了爆炸性的数据量增长,传统数据库处理起来,成本非常巨大。所以,并不只是为了国产替代,更是为了升级。”

此前,企业在选择国产数据库时,第一考虑的是与Oracle的适配和兼容关系,以降低应用和迁移成本。“2020年之前,几乎所有的国产数据库对企业宣传的核心价值就是兼容Oracle和MySQL。”一位数据库厂商对光锥智能讲道。

但在真正落地时发现,兼容是不够的,在适配时必须要取舍。Oracle数据库垄断了近20年,有很多特性逐渐落后,国产数据库的单纯替代没有意义,底层架构发生改变之后,性能要做到更加优化。

更重要的是,银行、保险、券商过去与Oracle进行了深度绑定,包括定义锁、治事务、嵌套表、索引组织表、PLSQL包、物化视图、Dblink、触发器、系统视图,改造难度极,如何提升庞存储过程中的识别效率关重要。

这不只依赖数据库厂商一家来完成,更需要使用方一起深度改造。太保集团与Oceanbase打磨的过程中,马波勇总结了升级过程中的三大挑战:

第一是国产数据库的性能,能否满足业务需求。“由于之前大部分系统使用传统数据库做支撑,在制定数据库的选型策略和升级方案方面,系统的兼容性、稳定性,数据迁移的便捷性、完整性是我们考虑的首要问题。第二,要考虑它在金融行业的应用案例是否广泛,是否具备足够的成熟度。第三个是在运维方面,需要具备较强的自主营运能力和支撑能力”,马波勇谈道。

第二是数据库的安全性和弹性伸缩能力。银行保险业数据量大、私密性强、波峰波谷期动荡,本地部署的数据库能保证安全性,但是相应的成本也会更高,且弹性伸缩能力差,无法灵活应变银行互联网化后的高频和多发需求。

那么,这三座“大山”,太保和Oceanbase是如何携手跨过的?

Oceanbase所升级的太保P17核心系统,同时面临着上述的三座大山。

“与一般热线系统相比,‘P17客户服务系统’涵盖了太平洋保险几乎所有子公司业务的服务入口功能,包括车险报案、车险增值服务、非车人意报案、道路救援、寿险保单查询、寿险保全受理、投保预约等等,对接周边系统超过200个,是太平洋保险关联关系最为复杂的系统之一。”

毫无疑问,对于P17的升级,是最为慎重的决定。2021年初,太保对国产分布式数据库,从功能、性能、易用性、完整性、可移植性、可靠性、扩展性、安全性等指标进行了全方位评估,最终选择了Oceanbase升级传统数据库。

2022年上半年,在不少项目暂停、放缓之时,太保和Oceanbase正在紧锣密鼓的远程协作,加班加点,只为搞定P17。

“项目刚开始时,正是上海管控最紧张的时刻。大家没办法到场地,造成了很多困难,但是OB在产业侧和技术侧联合攻坚,把这块硬骨头啃了下来。”林春谈起到项目的全过程,仍然不禁感慨。

Oceanbase的系统整体架构图

整个升级的流程,可以分为四个阶段:

第一阶段的重点,是通过Oceanbase的分布式架构彻底升级传统商用的主备架构,破除传统数据库与操作系统、中间件的耦合。据了解,与Oracle配套的DS、Cognos等产品对于Oracle深度依赖,适配改造复杂度很,将数据库分库分表,从集中式拆分成分布式,每个分片都能够独立执行读写,这个过程中需不断拆解中间件和操作系统之间的关系。

第二阶段,Oceanbase和太保并没有急着对业务进行升级,而是建立了迁移“标准”,一次次探索形成行业经验,破除替换升级的壁垒。

Oceanbase华东区金融技术服务总监郭文讲道:“厂商和用户侧的目标是希望效果稳定的与传统数据库兼容,标准化、流程化、制式化能够降低双方的人力投入,少走弯路,同时能够复制工具和经验。”

郭文介绍道:“Oceanbase通过制定33类标准规范和28类最佳实践,以及打磨了16款数据库转向工具,实现了标准化的Oracle兼容,这会极大程度破除迁移的不透明性,让企业更有信心,意识到升级不再是一件特别困难的事情。”

比如创新研发的“指南针”工具,能够对传统数据库进改造评估预扫描,包括近20个检查类,近200多个检查项,评估项全效,极提升项组问题排查的效率,缩短项周期从降低应改造成本。以“P17客户服务系统”为例,扫描出改造项约6000个,假设式排查2个问题/时,单个项即节约成本12.6/。

第三阶段,对P17中的业务场景进行逐个点测。对寿险保监会稽核接口系统、寿险营销员系统的佣金计算、智能决策服务平台和寿险统一承保平台等“一事一议”的替换。

第四阶段,从点测到全面升级。这里的全面升级,并不只是P17系统的全面升级,而是太保秉持着“先难后易”的原则,以P17这套最复杂的系统为模版,对周边配套系统进行分布式升级。在全面升级后,国产数据库的优异性能开始展现出来。据太保反馈数据,在保持了高运行性能、高可用能力的同时,数据库软件的运维费用大幅降低,每年可节省设备投入数亿元。特别是Oceanbase的高级压缩技术,结合“数据库瘦身”,将存储容量节省80%以上。

可以说,升级后的应系统弹性扩缩容、处理速度、数据加能均实现幅提升。

Oceanbase与太保的探索经验,也带动着金融数据库发展进入下一个阶段。

在整个实践的过程中能够明显发现,金融场景考验的不只是性能,更多还在于复杂业务中的灵活应变能力和适应能力。显然,诞生于金融场景的Oceanbase更懂行业的需求和痛点,也有机会能将实验室的解决方案,搬到了业务中去。

2013年,Oceanbase开始应用于蚂蚁集团的支付业务,当时大部分互联网企业都在采买Oracle,但随着双十一交易量的瞬时爆发,成本高企压力之下,促使了云厂商们开始自研数据库。

彼时Oceanbase最核心的任务,是完成降本增效和弹性伸缩。在这两个方面的经验,也在太保案例中得以体现。

林春就算过一笔账:“1TB的存储成本传统数据库要4500块钱,Oceanbase压缩到了三分之一,成本会大幅减少。另外数据库加密之后,对场地成本要求就没有那么高,也能降低硬件成本。”

2020年山东移动计费业务系统接入Oceanbase,其计费业务详单处理时长缩短至5分钟,处理效率提升30%,数据由7T压缩至0.7T,存储投入成本降低90%。

另一方面,Oceanbase的单机一体化分布式架构也能够在硬件存储资源帮助企业控制成本和灵活扩缩容。顾名思义,单机一体化的数据库,既能够适应大型企业的系统逐步替换需求,在不需要分布式架构时,也可以作为一个完整的集中数据库提供,让企业能够部署更灵活。

除此之外,全自研数据库也成为了Oceanbase换道超车的关键。

Oceanbase数据库创始人、首席科学家阳振坤此前提到,“全自研是个苦活累活,Oceanbase数据库是从第一行代码开始,到现在积累了几百万行代码量,但是好处也显而易见。”

让林春印象最深刻的是Oceanbase对Bug的修复速度非常震撼。常常很多问题,大致是第一天发现,第二天就能更新一个修复版本,这就体现了Oceanbase全自研数据库,将内核代码都掌握在自己手中的特点。Bug修复速度是技术兜底的一个很好的验证,如果没有对核心代码的掌控,从排查问题到解决问题,就做不到闪电速度。

也正是因为上述原因,让大型银行、保险业开始对国产数据库充满信心。

但这也只是万里长征的第二阶段,数字化、智能化的车轮滚滚向前,国产数据库从金融场景“杀”出来之后,千行百业中还有更广阔的星辰大海。

THE END
1.保险行业数据库(2014年11月).ppt下载得到文件列表 保险行业数据库(2014年11月).ppt 相关文档 文档介绍文档介绍:保险行业图库(2014年11月)保险行业综述保费方面: 2014年前10月, 。%,,。 其中,。%,,。。%,增速较去年同期上升 ,。赔付方面: 2014年前10月,;%,。其中,;%,。 赔付/,。其中,寿险赔付/,。投资方面: 2014年前10月,;%。 %,...https://m.taodocs.com/p-75073478.html
2.求助保险行业数据库除了国泰安有还有哪个数据提供商有呢...【求助】保险行业数据库 除了国泰安有 还有哪个数据提供商有呢? 人大经济论坛-经管之家:分享大学、考研、论文、会计、留学、数据、经济学、金融学、管理学、统计学、博弈论、统计年鉴、行业分析包括等相关资源。 经管之家是国内活跃的在线教育咨询平台! https://bbs.pinggu.org/jg/huiji_huijiku_993748_1.html
3.保险行业信息化项目共同的特点都要求有一个安全的基础网络平台,将大量的即时信息纳入公司的整体的数据库中,这对保险行业公司网络平台的稳定性、安全性提出了更高要求的挑战。 但是保险行业机构众多,且分部在全国各地,各营销点、代理商以及保险业务人员经常无法将客户保单及时录入公司总部数据库而导致保单拖延,如果以传统的专线、...http://www-img.gnway.com/prod/teamlink_pro/solveScheme.php
4.数据库安全防护产品数据库审计数据库防火墙安华金和(www.dbsec.cn)数据库安全防护产品中心,提供数据库防火墙系统,数据保险箱系统,数据库脱敏系统,监控与审计系统,数据库漏洞扫描系统,数据库漏洞验证系统等产品服务。https://www.dbsec.cn/wap/solutions/list.html
5.中国保险行业智能风控白皮书.docx第三,保险公司及行业数据割裂,数据质量低,无法有效支撑风险管理需要。为解决以上痛点,保险公司需深度应用人工智能、区块链等前沿技术,从数字化、立体化、前置化、智能化四个方面全面升级风险管控模式。风控数字化:建立配件工时、医药方案等标准数据与规则库,优化风险预警规则和模型。风控立体化:引入行为、车辆、健康等非...https://m.book118.com/html/2019/1015/5141314300002140.shtm
1.国泰安中国保险行业数据库开通试用(2021.9.24~2021.10.23)我馆已购买国泰安部分子库,本次开通试用的是中国保险行业数据库。 中国保险行业研究数据库提供保险行业基本概况、经营数据、财务数据、业务统计、财务分析等数据。重要字段包括:人员文化水平结构、专业技术职称、法人代表、财产险收入(保险收入)、寿险收入、企业年金缴费、赔案件数(赔偿件数)、赔偿支出、分出保费、再保...https://www.sem.tsinghua.edu.cn/info/1155/11464.htm
2.创新推动应用国产数据库成功打开保险行业应用之门信息化作为保险业改革发展的重要组成部分,是保险业快速发展,改善客户关系、强化风险管控以及保险创新的重要技术支撑。近年来,全行业对信息化的认识水平不断提高,保险信息化的发展基础环境进一步改善,信息技术对保险业的持续快速发展起到了至关重要的作用。 做为中国数据库第一品牌的人大金仓,成立十年来坚持自主创新为核...https://www.finclip.com/news/f/70592.html
3.中国保险数据库,有哪些值得关注的数据指标?基础知识前言:随着互联网的不断发展和保险行业的不断壮大,中国保险数据库也逐渐成为了保险行业的重要组成部分。作为保险行业的信息中心,中国保险数据库不仅可以为保险公司提供各种数据指标,还可以为保险行业的监管机构提供重要的数据支持。这些数据指标包括保险产品的销售情况、保险产品的保费收入、保险产品的理赔情况等。其中,保险...https://www.shenlanbao.com/zhishi/5-577212
4.保险业协会建议共享医疗降数据库中国消费者报讯(记者 聂国春)中国保险行业协会在近日发布的《2020年度及2021年一季度健康险发展形势调研报告》(以下简称《报告》)中建议,推动建立行业共享的医疗健康数据库。 《报告》指出,去年以来,健康险行业发展整体呈现四大特点:一是财产险公司健康险业务高速增长,保费增速高于人身险公司。二是个人和团体业务、短期...https://m.hexun.com/news/2021-07-13/203946021.html
5.怎么查保险行业数据分析?万象方舟商业数据库和数据提供商:一些商业数据库和数据提供商会提供定制的保险行业数据和分析服务。例如,您可以使用数据分析软件如Bloomberg、Thomson Reuters或者数据供应商如Statista、MarketResearch.com等来获取各种保险行业的数据。 学术研究和期刊:一些学术研究机构和期刊也会发布有关保险行业的研究和数据分析。您可以查找一些专门...https://www.vientianeark.cn/qa/131102.html
6.有志从事证券保险行业的你看准啦!广东金融高新区这些企业虚位以待...2、协助业务部门进行机构客户开发和维护,提供研究支持; 3、深耕产业链,拓展市场资源,搭建研究信息点库。 工作地点:广东佛山 应聘方式 应聘联系人:戴先生13928074230 邮箱:842022069@qq.com 原标题:《有志从事证券、保险行业的你看准啦!广东金融高新区这些企业虚位以待!》...https://www.thepaper.cn/newsDetail_forward_6322814
7.中华财险信息技术部总经理陈小虎:构建新一代全分布式架构核心系统...陈小虎:中华财险的单元化多活架构是一体化内容,不光是数据库能够承载,还把阿里云计算的整个框架都融合到了新一代的核心里。通过软硬一体化架构共同支撑“新一代”核心业务系统,区别于以往传统意义的混合云架构,他是国内率先在保险行业试行的单元化多活混合云架构,通过云上云下流量同时分发多活的模式支撑业务系统。https://www.csdn.net/article/2022-03-30/123843140