分享好友 站长动态首页 网站导航

白硕:金融分布式数据库LightDB自主可控、更懂金融、更懂客户

网友发布 2022-08-03 15:16 · 头闻号数据库

走过26个年头的恒生电子见证了中国现代金融的发展史,是国内金融IT行业名副其实的龙头企业。面对如今云计算、大数据、人工智能、区块链等关键技术逐渐成为行业主流变革力量的潮流,恒生电子总裁刘曙峰曾表示,数智化浪潮正席卷资产管理、财富管理、机构服务、风险合规等金融核心的业务领域,预计到2030年,整个金融行业将完成数智化升级。近日,恒生电子在2021LIGHT开发者云大会上发布《慧技术·惠金融——2022金融科技趋势研究报告》,从数据、智能、效率、安全四大方面探索金融行业全面数字化转型和创新升级。

今年以来,恒生电子发布了一系列金融数产品,如投研一体化洞见平台、智能算法云平台妙算、智能风险预警平台智眸、实时数仓产品ART、数据中台产品HDP等。本次开发者大会,恒生电子又重磅推出金融分布式数据库“LightDB”、金融科技创新协作共享的Light云平台,包括云原生底座“Light-Core”、在线数据服务“恒有数”、区块链公共服务平台“H-BaaS”,以及面向金融行业不同场景的创新产品:包括FPGA极速行情系统、智能文本标注平台、低码平台ATOM、前端应用技术平台Light-FE,全方位展示恒生电子前沿技术研发成果。

恒生研究院院长白硕是不折不扣的金融科技老兵,深耕金融科技、计算机软件、自然语言及人工智能领域几十年,曾任中科院计算所研究员、博士生导师、软件室主任、软件方向首席科学家。在任上海证券交易所总工程师十余年,主导的上交所新一代交易系统可支撑最高每秒13万笔订单处理,每天可支持1.2亿笔成交。另外,白硕创立的阡寻科技及丹渥智能专门从事人工智能在金融领域应用的研究,聚焦下一代技术的突破。

打造更懂金融的自主可控数据库

白硕院长在恒生电子2021LIGHT开发者云大会上第四个出场,除了发布恒生最新的数据库产品LightDB外,他也分享了恒生电子在数据库方面的研究成果和心得。他表示,目前国产数据库与主流数据库和开源数据库已经呈现出三足鼎立的新局面。虽然国产数据库过去处于比较弱势的地位,但随着国际关系的变化、潜在供应链风险的加剧,国产数据库得到了进一步的发展,正在主动改变原有的均衡。

而提到恒生电子为什么要进军金融分布式数据库领域,白硕说道,“我们有三个考虑:第一,自主可控,这里既包括行业层面的可控,也有通过国家层面加给行业的一些可控性要求;第二,希望业务系统更加稳定;第三,我们在金融领域深耕了二十余年,我们对这个领域应用数据库的模式和痛点有比较深入的理解,对行业系统所加载的负载类型和一致性要求,也有非常深入的理解和掌握。我们希望能够将这些经验和行业分享,从而赋能行业。”

金融行业的企业选用数据库一般有三类需求,即交易、分析和运营。不同的系统有不同的需求,比如交易系统对“稳定性”和“高可用性”要求非常高,分析系统则要求对“大数据量”和“统计功能”的支持,而运营系统需要多领域联合分析,需要更灵活的即席查询等等。作为一个数据库产品,既要能支持单类系统,也要能够支持多种系统的混合。

金融行业选用数据库的三类需求,来源:恒生电子2021LIGHT开发者云大会

金融从业者们都知道,谈到金融数据库一定是“稳”字当头,不稳定的系统一票否决。白硕表示,其他行业和领域对于系统偶发性、正确性有一定的容忍度,但是在金融领域不允许这样,它必须极端可靠,对差错零容忍。因此,金融系统对运营运维要求都比较高,尤其是交易类关键业务的应用在数据库都非常慎重。

恒生电子自研的分布式数据库LightDB正是以金融级的稳定性作为目标,首先它基于开源的PostgreSQL稳定版,集成大量第三方插件,其次恒生电子对第三方插件进行了全面的集成测试, 可以达到更高的代码测试覆盖率,同时恒生电子也做了一些稳定性、性能方面的优化,最终使LightDB 达到金融级稳定标准,可以长时间稳定运行。

白硕说道,金融级的稳定性是持续、可预期的高性能,不是有时高性能、有时不可预期,它要求在方差比较小的情况下,每秒交易数TPS达到一定数量,比如平均15万次。要做到这一点,一方面底座要可信,性能可预期,另一方面通过日志的方式保证系统数据不丢失,还要在日志开销与高性能之间做好平衡。此外,数据的一致性也很重要,我们其中一种做法是通过对一致性的差异化管理,采取不同的数据流量分配给不同等级的策略,将节省出来的开销用于提升性能。

此外,白硕认为国产金融数据库需要加强的是运维的管控。“在金融领域,保持稳定可靠需要有两方面的能力,一方面是技术质量的特性,另一方面是运维管理所需的技术支持,包括容量及设备故障的预警等。我们要虚心接受来自这方面的打磨,只有这两方面都上去了,未来数据库领域的竞争格局才会呈现出更精彩的态势。”

从数据库架构的角度,白硕谈到,主要的挑战是架构要有足够的弹性适应业务的变化。从整体来说,LightDB 采用分布式架构,计算和存储分离,支持多存储引擎,多副本高可用,同时内置数据库管理平台,通过与其他数据库连接进行备份。而打造弹性架构,需要在一个领域深耕多年的积累,而且达到一定技术的高度,方能提炼出最合适的弹性架构。

LightDB架构,来源:恒生电子2021LIGHT开发者云大会

据白硕介绍,为了确保数据库的安全可靠、自主可控,LightDB支持麒麟Linux,openEuler等国产操作系统,支持华为鲲鹏ARM,海光x86处理器等国产处理器。恒生电子还与华东师范大学携手对LightDB的核心技术进一步研发,共同突破数据库的技术瓶颈,同时推动行业信创数据库测试标准的建立。

目前,在恒生电子体系内,LightDB已陆续应用于恒生TA产品及恒生内部的效能平台等系统,恒生电子亦与外部金融机构客户积极探索国产数据库应用场景,推动金融信创产业的良性发展。

客户更换的不只是数据库的软件

尽管在顶级学府浸润多年,白硕院长并非纯学院派,他在金融行业十余年的经验积累,不断倾听来自银行、券商、保险等各类客户的需求,能够从他们的现实应用场景出发,帮助他们解决在数字化转型中遇到的实际问题。

当数据猿记者向白硕提出“现在国内数据库客户的痛点”的问题时,白硕回答道,“重新选择数据库与已经使用了一种数据库,要更换数据库,痛点是不一样的。我们所有的客户都已经有数据库,所以他们的主要问题在于不是重新采购一个数据库,而是更换数据库。”

白硕表示,“第一,我们关注到,客户在更换数据库时,面临着上有应用、下有数据的情况。在这种情况下要更换数据库管理系统,首先会考虑能不能保证原来使用的数据库性能。其次他们会提出,原来的应用尽量少动,最好是不动。本来数据库是非常标准化的情况,可以不动。但实际上并非如此,由于每个数据库产品如Oracle、MySQL,或多或少都有自己的“语言”,要用恒生的数据库替换这些数据库,不得不涉及到这些问题。”

所以,在兼容和易用性上,LightDB兼容Oracle和MySQL的常用特性,支持向导式安装、开箱即用的监控管理、企业级管理监控中心等,包含自动检测硬件性能工具,定期根据真实的硬件推荐优化配置。

在白硕看来,数据库兼容并不只是技术问题,还需要考虑到人性和经济方面,必须是最大程度平滑替换、最少的替换成本。因为任何应用都有习惯路径,原有高效率的写法,如果不支持了,它的效率就会降低下来,更不用说需要做大量额外的工作去配合迁移。“我们新推一个数据库,不能给客户带来额外的负担。符合他们的习惯用法,这是我们的出发点,否则推出去效果肯定不好。”

白硕谈到的第二点,则是金融客户非常依赖于原厂服务,客户购买数据库并不只是买一个软件,它包括运维、配置、优化、升级等一系列服务。如果说替换原有的数据库,替换的也不仅是一个软件,如果说这些服务跟不上,或者不具备与原厂商服务旗鼓相当的能力,客户也不会选择你。

白硕介绍说,运维管控其中一个重要功能是“告警”,因为数据库经常会遇到各种容量上限,如此情况发生需要事前告警。而启动告警的前提是必须能够实时获取、采集到容量的信息,涉及到的是数据库的管理系统要对数据进行采集、监控、分析、展现,告警是它的最终结果。

如果同样的现象出错多次,就可以形成智能化的分析。在智能化分析的基础上提前告警,及时排除风险。恒生电子根据金融行业运维人员、DBA的普遍痛点需求,在行业应用基础上,总结出了一套智能告警体系,内置在LightDB中。白硕表示,要真正做到数据智能化,既需要管理理念的更新,也需要技术手段的进步。

金融数字化转型将推动观念的转变

在《慧技术·惠金融——2022金融科技趋势研究报告》卷首语中,白硕表示,“回首中国资本市场建立以来所经历的IT本身的沧桑巨变和金融科技给各项业务带来的巨大变革,我们深切感受到,技术决策对于金融机构的影响是至关重要的,而技术决策又离不开对技术应用趋势的深刻洞察,离不开业务对技术的牵引和业内广大IT从业人员在技术应用上的实操经验。”

而在2021LIGHT开发者云大会现场,金融科技行业专家对这种变革也提出了自己的阐述。恒生电子执行总裁范径武表示,对于金融行业来说,过去科技是工具,配合业务的开展;而当下,科技已贯穿于整个金融产业链之中,科技是赋能业务的伙伴,科技条线与业务部门协同深化,带来了交互模式的变化、受众人群的变化以及商业模式的变化。

华夏银行总行信息科技部需求中心及运行中心处长宁冰则表示,“数字化转型过程中,我们提炼了一句话,就是被动变为主动。科技部门原来的工作模式更多是受理需求,拿到一个需求进行开发,开发以后再投产。在数字化转型的大背景下,我们提出了一句口号“需求引领”,从原来被动收集需求的模式,转变为科技作为一个小团队“走出去”,走到部门当中,走到市场当中,与客户经理、客户谈,确定场景和新的技术,这个模式取得了意想不到的好效果。”

华东师范大学副校长周傲英认为,数据库未来的发展趋势对中国是非常好的机遇,因为数据库是典型的应用驱动发展的技术,应用创新和技术创新能够形成良性循环,应用促进技术的进步,技术倒逼应用发展。“我们所处的这个时代,是替代工程和转型升级并举的时代,这是大势所趋。”

文:陆易斯 / 数据猿

免责声明:本平台仅供信息发布交流之途,请谨慎判断信息真伪。如遇虚假诈骗信息,请立即举报

举报
反对 0
打赏 0
更多相关文章

评论

0

收藏

点赞