本文来源于:2023年度城市金融服务优秀案例,作者:台州银行

台州银行:基于StarRocks构建极速统一的数据服务平台

2023-09-27 关键词:全国性商业银行,渠道建设,基础平台建设2159

一、项目背景及目标


随着银行业数字化转型步伐的加快,我行数字化应用不断推进,大量应用系统需要依赖大数据的驱动和支持。


以往的做法是根据某个应用的需要,一般采用数据复制的方式,将大数据平台的数据复制到该应用所在的数据库。


但是经过多年的运行,在数据量不断增加、业务需求日益复杂的情况下,也逐步暴露出一些问题:


一是带来大量的数据存储冗余,增加应用系统数据的管理成本;


二是数据加工同步链路长,效率较低,数据应用时效性较差;


三是增加业务系统库压力,部分业务库在大表查询上性能不佳,数据查询压力较大。


通过建设数据服务平台,将大数据的数据封装成接口,为各业务系统提供稳定、便捷、性能优异的取数服务。


二、项目/策略方案


整体技术架构设计如下:


(1)数据批量计算

依托于大数据平台的算力对海量数据进行批量加工计算,实现前置数据模型计算。


(2)数据同步:

采用StarRocks的Brokerload/RoutineLoad等方式高效同步大数据中的模型数据。


(3)接口开发发布:

应用平台基于StarRocks中数据配置开发相关接口并注册到网关之上对外发布。


(4)接口鉴权及调用:

应用系统通过Http请求调用接口,服务平台通过请求头信息进行鉴权。


三、创新点


(1)技术架构设计创新:

本项目区别于以往将大数据里的数据复制到各业务系统的做法,而是基于上层应用平台+底层StarRocks构建统一的数据服务平台,大数据的数据通过BrokerLoad/RoutineLoad方式导入StarRocks,应用平台将数据封装为接口,利用Starrocks优越的大数据查询性能和高并发能力,供各业务系统调用;


应用平台基于SpringBoot框架和Kong的网关注册实现“分布式+微服务”设计模式,达到高可用、高并发、可伸缩、服务注册发现、接口鉴权限流等效果。


(2)接口管理设计创新:

接口分类管理,业务系统分别授权,可实现接口与系统多对多绑定,部分重复查数需求可以合并。


四、项目过程管理


项目整体实施周期如下:


厂商进场建设:2022年8月


系统上线:2023年1月


五、运营情况


目前数据服务平台已上线8个月,已上线13种业务类型70余个接口,已接入反洗钱、反欺诈、个人网银、电子函证等13个业务系统,日均导入数据50余G,日均提供接口访问30余万次,接口响应成功率99.99%,接口响应时效99分位在300毫秒以内。目前对接的业务系统及需求正在快速增长。


六、项目成效


数据服务平台目前已上线运行8个多月,整体运行平稳,带来的成效主要有以下几点:


一是为业务系统提供及时数据查询服务,提升业务系统数据应用时效性,相较于老的数据下数的同步方式,整体耗时缩短80%,业务系统能更早的获取到新的业务数据,提升业务体验;


二是敏捷响应业务系统用数需求,服务平台通过配置的方式快速生成接口,业务系统调用接口即可获取数据,整体用数需求响应速度提升50%,提升业务系统需求迭代效率;


三是为业务系统提供稳定、高性能的数据查询服务,平台提供高可用的数据查询服务,提升业务稳定性,同时平台具有较好的数据处理能力,亿级数据点查能做到毫秒级响应,为业务系统提供性能优异的数据查询能力,提升业务系统用户体验。


目前平台已接入13个业务系统,覆盖对内、对客多种业务场景,为相关业务系统提供了稳定、便捷、性能优异的取数服务。


七、经验总结


数据服务平台的应用,为大数据提供统一的数据出口,为大数据驱动和支持业务发展提供了一种更为高效便捷的新模式。业务系统可以更加专注于自身业务逻辑而无需关心底层数据结构及来源,降低业务系统复杂度,同时为业务系统提供了大数据的存储和计算能力,提高了查询效率,提升了数据流转效率,降低了数据使用成本。

本网站案例,除特殊标明来源的,版权归金科创新社所有,未经许可不得转载,否则将视为侵权,对于不遵守此声明或者其他违法使用本文内容者,本网站依法保留追究权。另,本网站部分案例、观点文章来源于网络素材,如有侵权,请邮件联系 fenglei@fintechinchina.com 处理!
特别提示: 本网站免费为广大金融企业提供IT选型咨询服务,详情点击 【 需求提交 】

推荐阅读

更多

云南红塔银行:“香叶智农”——一站式烟农服务平台

云南红塔银行结合国家烟草专卖局《关于建设现代化烟草经济体系推动烟草行业高质量发展的实施意见》和云南省《云南省数字烟草农业发展总体规划》的相关要求,结合人民银行普惠金融的相关政策规定,配合南省烟草专卖局(公司)搭建了“香叶智农——一站式烟农服务平台”,结合烤烟生产全流程,在平台上为种植主体、第三方供应、服务商等提供多样化的场景金融服务,提供安全、便捷、高效的线上烟农支付结算服务,助力乡村振兴。

2022年度城市金融服务优秀案例评选 云南红塔银行 2023-09-27

乌鲁木齐银行:个人消费贷款(雪莲E贷-精英贷)

该产品充分利用科技手段开展产品营销和服务,客户通过线上渠道申请贷款,客户经理通过移动办公线下补充资料,无需抵押、操作便捷,一经投产就获得了客户的热烈欢迎与认可,不仅提升了我行信贷业务办理效率,让更多的客户感受金融科技的力量,还促进了当地的经济发展。

2022年度城市金融服务优秀案例评选 乌鲁木齐银行 2023-09-27

九江银行:授信审批工具及调查报告智能化系统

“授信审批工具及调查报告智能化系统”是我行围绕信贷业务“贷前调查、贷中审查、贷后检查”三阶段,提升贷款三查报告(贷前调查报告、风险审查报告、贷后检查报告)“撰写、审查、修订”过程的智能性、专业性、效率性设计开发的系统工具,是我行“授信业务全流程线上化”工程主力系统之一。 该系统主要通过“报告模板创建、报告撰写、智慧审批、结构化数据搜集”四个功能模块,为信贷业务“营销尽调、审查审批、风险控制”人员提供业务支撑及决策管理服务。

2022年度城市金融服务优秀案例评选 九江银行 2023-09-27

日照银行:“黄海之链”供应链金融服务平台

黄海之链”平台于2021年8月18日上线,是日照银行推出的首个To B端金融服务门户网站。平台全面融合区块链、物联网、人工智能、大数据等智慧科技,将金融科技成果与实体经济场景有机结合,实现对产业链全链条、全周期、多维度金融服务需求覆盖,加速产业运行效率;通过数据要素全面运用,实现信息化、数字化和智慧管理;通过与商贸物流平台、交易市场、电子仓单系统等特色场景对接,打造“产业经济+金融服务”的数字化生态闭环,实现产业链交易全流程业务可视、数据可信、资产可控,有效解决上下游中小微企业融资难、融资贵问题。

2022第三届中小金融机构数智化转型优秀案例评选 日照银行 2023-09-27

贵阳银行:烟草e贷(烟商)

为进一步支持小微客户的稳定发展,精准支持小微客户稳定就业,提升小微客户金融服务质量和效率,贵阳银行通过引入省烟草局的烟草数据,采集多方数据信息进行比对,自建风控模型决策体系,2021年8月推出了针对烟草商户的自助贷款-“烟草e贷(烟商)”。“烟草e贷(烟商)”借助多方技术支持,实现贷款全流程线上化,大大降低小微企业融资成本,有效解决广大小微客户的融资难题,实现小微零售贷款业务“提速、增质、降价”。

2022年度城市金融服务优秀案例评选 贵阳银行 2023-09-27

重庆银行:乡村振兴青年贷

乡村振兴青年贷是重庆银行在共青团重庆市委、重庆市财政局、人民银行重庆营业管理部联合推出的“乡村振兴青年贷”项目基础上通过拓宽申请渠道、简化办理手续、丰富担保方式推出的重庆市首款专属青年人才“乡村振兴青年贷项目”特色信贷产品,具有资料简、额度高、利率低、审批快、担保方式灵活多样等优势。乡村振兴青年贷的推出,为投身乡村振兴、农业农村现代化发展的青年提供有力的信贷支持,助力农村人才振兴、产业振兴。

2022年度城市金融服务优秀案例评选 重庆银行 2023-09-27

案例库

金融行业全面的数字金融创新案例,涵盖历届“鑫智奖·金融机构数智化转型优秀案例评选”、“农村金融机构科技创新优秀案例评选”、“城市金融服务同业案例征集活动”等科技创新参评案例

  • 全国性商业银行
  • 基础平台建设
  • 渠道建设

微信
咨询

微信咨询

扫码添加金科小助手微信号
咨询案例和解决方案相关信息
或联系对应机构