PPT | 中国信息通信研究院工程师马鹏玮：金融分布式事务数据库白皮书和标准解读

Posted 2021-04-25 大数据技术标准推进委员会

在“2018大数据产业峰会—分布式数据库技术论坛”上，中国信息通信研究院工程师马鹏玮带来主题演讲，从四个方面对《金融分布式事务数据库白皮书》及相关标准进行了详细解读。

中国信息通信研究院工程师  马鹏玮

在座的专家好，感谢各位银行和各位企业的专家，我是来自云大所的马鹏玮，今天把我们的工作给大家分享一下，刚才观察了一下这个会场，在座的各位专家有四个特征，第一个特征大家都是有技术基础的，因为这是一个非常技术的专题，在座的专家都是跨过了技术门槛的，第二我觉得大家都是非常有情怀，刚才领导提到贸易战的问题，我们做这个东西会面临非常强大的垄断对手，所以有勇气做这个事情是非常有情怀的，第三个非常有毅力，我了解到在座的企业有的上线核心用了四年时间，非常能撑得住气，现在做一个大数据产品，很少有人说用四年时间做然后放到线上去，时间很宝贵。最后大家也是非常有颜值的，比如咱们的陈经理和张教授，都具备非常精神的风貌，做数据库的女专家非常棒。

我的讲解从以下四个方面。

首先对我们金融分布式事务数据库项目组做一个简短的介绍。

 

项目组的工作目标是围绕金融分布式事务数据库主题，搭建产学研统一平台，共同探索研究金融级别分布式事务数据库国际标准、应用路线、产业布局等，推进中国金融业分布式转型进程。牵头单位为中国信息通信研究院云计算与大数据研究所和支付清算协会金融科技专业委员会。当前参与的单位有中信银行、北京银行、光大银行、建设银行、民生银行有限公司、中兴通讯股份有限公司、蚂蚁金融服务集团、PingCAP、腾讯云计算（北京）有限责任公司、广州巨杉软件开发有限公司、上海热璞网络科技有限公司、天津南大通用数据技术股份有限公司、上海爱可生信息技术股份有限公司。目前已举行项目组集中会议举行4次，平均5小时/次；已确定项目组宗旨、工作目标、工作计划；已制定业内首个《大数据产品分布式事务数据库第一部分：技术要求》；已制定业内首个《金融分布式事务数据库白皮书（1.0）》。

 

当我们说“分布式事务数据库应用在金融领域很有必要”时，其实有很多深层次的东西需要我们去思考，比如：

具体怎么落地应用？

应用之后会对业务造成什么影响？

应用之后对现有人员和资源改变是什么？

有没有其他人已经成熟的应用案例借鉴？

是不是某些细化的金融场景？

金融行业和其他行业的区别？

金融监管机构的导向是什么？

分布式事务数据库是什么？

和现有数据库系统区别是什么？

分布式事务数据库现在发展的怎么样？

有什么必要？

紧迫性有多强？

长周期内是不是一直有强需求？

这些问题都将在这本白皮书中得到回答。

 

这个白皮书包括六个章节。

 

第一章是分布式事务数据库的概述，把我们看到的三个现象列了出来，第一是互联网业务爆发式发展催生信息系统架构转型需求，我举个例子，双十一交易量8年增长3000倍，而2011-2014“双十一”16家上市银行中8家支付出现拥堵。

 

第二是从集中式架构向分布式架构转型探索取得积极进展，2013年支付宝全线下线IBM小机和EMC存储设备，2014年下线Oracle，同时经历了2015-2017业务验证。

 

第三是金融监管机构相关文件指出了金融信息系统向分布式架构转型的方向，2017年，央行《中国金融业信息技术“十三五”发展规划》，2016年，原银监会《中国银行业科技“十三五”发展规划监管指导意见（征求意见稿）》。里面都涉及到向分布式架构转型的政策要求。

 

同时我们整理了一个发展阶段，总体的历程有六个阶段，也就是从传统的数据管理系统到OLAP/OLTP，到后续的nosql数据库和分布式事务数据库，我们给出了一个结论，未来新兴的数据库发展将融合分布式的分析和事务能力，也就是HTAP能力。

 

同时我们给出了首个相对全面的分布式事务数据库的定义，我个人找各种资料并没有权威的机构曾经给出过相关的内容，这里我们总结了三个核心的属性：

1、事务数据库属性；

2、OLTP联机交易能力属性；

3、分布式架构属性。

 

六项基础能力：

1、基于X86等工业标准硬件；

2、事务的ACID的要求；

3、支持高并发OLTP工作负载；

4、标准的SQL操纵方式；

5、高可用性保障；

6、跨数据中心站点级别的扩展能力。

 

接下来是金融行业事务数据库的概述，首先做了一个典型中型银行机构的各类数据库占比的统计，个位数的以AS390为代表的大型机，百级别的以AS400为代表的小型机，百级别的X86、windowsserver等支撑外围应用。

 

但是当前这套系统痛点是什么？

1、金融大数据发展，亟需提升管理弹性；

2、金融业务流量提升亟需提升处理性能；

3、金融数据资产属性亟需升级安全保障；

4、金融数据模式变化亟需多模处理能力；

5、金融多套业务系统亟需开发运维能力；

6、金融产品服务绑定亟需自主可控产品。

 

我们梳理了一个金融关键业务对分布式事务数据库的要求，当前分布式事务数据库能力基线尚未在业内形成统一认识，为支撑关键业务得到良好发展，金融分布式事务数据库在选型评估时，需要着重对以下六方面能力进行考量，基本能力、兼容能力、管理能力、高可用能力、扩展能力、安全能力。

 

分布式事务数据库对金融业务设计的改变，分析分布式数据库改造后将会对现有金融信息系统设计模式带来的变化，需要指导相关人员从业务设计和实际操作等方面完成意识认知和过渡。业务系统组件化、服务化改造；系统容量评估及弹性方案；系统运维方案；高可用及容灾方案；模式设计满足扩展需求；数据库业务开发注意事项。

 

金融分布式事务数据库迁移策略，一个是可持续发展原则，二是透明开放原则，三是代价可控原则。具体根据各金融机构的产业和自身业务进行调整。同时实施流程也可以归纳为图中所示的规范步骤。

第三部分是我们金融分布式事务数据库的标准解读，这份标准进行很多线下沟通之后才整理出来的。

 

“金融机构成功应用分布式事务数据库”，这句话进行深层次解读，仍然会有很多需要思考的东西。

第一，安全性高、性能强劲、成本低廉、应用简单、便于维护。这些到底能不能实现？大家沟通都很模糊，但是我们做了分布式事务数据库的基础标准，分布式事务数据库技术标准将设立多层次门槛，以标准带产业，统一认知水准，实现业务共识，从而减少重复工作与业务风险。厂方和金融机构沟通会更加方便。

 

我们整理了刚才六项基本的能力，每一项能力又梳理的很多目标，一共有50项技术指标，包括18项技术功能，6项兼容能力，14项管理能力，4项高可用、4项扩展性等。

 

介绍一下我们项目组的未来工作计划。

 

当前产业面临的几个问题：

1、技术门槛高；

2、缺乏相应国际经验与成熟商用方案；

3、从集中式向分布式转型的路径不明确，标准不统一；

4、配套体系不成熟。

 

针对四个痛点和难题我们做了以下四项工作计划规划：

一是标准：新型产品技术要求，原有体系迁移规范，运维服务保障准则。

二是测试：基础能力，性能水平，服务能力。

三是试点：开发金融模型，联合金融试点，推广金融经验。

四是生态：银企联合平台，运维服务社区，国际水准推广。

 

精彩内容回顾