报告概述
本报告系统阐述了常熟农商银行第三代数据中台的建设实践与创新成果。研究对象为金融级数据中台,覆盖从数据仓库到湖仓一体架构的十年演进历程。报告重点分析了基于Tez引擎和Lakehouse架构的技术升级,包括存储压缩、跑批引擎优化、实时风控、BI自助分析以及AI问数等核心内容。采用案例与数据结合的方式,展示了新中台在业务效能、研发效率和数据价值释放方面的显著成效。读者可从中了解中小银行如何通过数据中台重构实现自主可控与业务赋能。
报告的核心结论
湖仓一体架构显著提升数据平台性能与存储效率
报告显示,新平台采用Tez引擎并搭配Snappy与Zlib压缩,跑批总耗时从2311小时降至963小时,提升2.4倍;存储从3.64PB压缩至2.08PB,节省1.56PB,服务器及软件授权预算节省19.5%,实现了“变小又变强”的升级效果。
新数据中台驱动业务效能革命,关键报表提速最高649倍
报告表明,新平台上线的关键业务报表出数时间最高提速649倍,绩效研发效率提升400%,小微企业贷款审批时效从30分钟缩短至平均10秒,支撑了全行业务的敏捷决策与快速响应。
实时风控独立集群部署,大幅提升风险识别能力
该中台方案为实时风控配备独立集群,支撑授信、小微、零售等场景,已形成71套策略、4400+条规则。日均监测交易250余万次,识别风险8000余次,涉案账户识别覆盖率超80%,同时审批时效由30分钟降至10秒。
BI与AI问数推动数据平民化,全员数据使用效率倍增
报告指出,通过BI工具开放数据融合层与领域集市层,分支机构可自主搭建报表;AI问数产品“燕讯”提供1000+标准化指标,支持自然语言查询,日均交互频繁,真正让数据成为一线员工的随时可用工具。
报告回答的关键问题
金融级数据中台如何实现自主可控的架构升级?
报告以常熟农商银行为例,展示了从传统数据仓库到湖仓一体架构的演进,采用华为MRS+DWS平台,替代原有CDH和TD平台,实现基于鲲鹏服务器和麒麟操作系统的自主可控。新架构通过Tez引擎优化DAG调度,减少HDFS写入,跑批效率提升2.4倍,存储节省近半。
湖仓一体架构在银行数据中台中有哪些具体优势?
报告显示,湖仓一体架构使数据湖(Hive on Tez)跑批提速2.4倍,数据仓(DWS)提速10.6倍,监管报送提速16.5倍。同时支持实时数据湖(Hudi)与MPPDB只读查询,实现离线与实时统一存储与分析,并降低TCO约20%。
新数据中台如何提升银行小微贷款业务的审批效率?
报告指出,通过实时风控独立集群部署,小微市民贷审批策略包含12个规则集,平均每个规则集86条规则。策略上线后,审批时效由原来的30分钟缩短至平均10秒,同时不良率控制在0.75%,行业领先。
BI与AI问数如何降低银行的数据使用门槛?
报告显示,BI工具开放80多张模型表和40多张考核明细表,分支机构可自助搭建看板,2025年看板查询量较去年提升2.5倍。AI问数产品“燕讯”支持自然语言查询1000+标准化指标,如“我所属机构对公贷款年日均?”,已有上百人使用,实现数据服务从“专业大餐”变为“便捷快餐”。
报告中的代表性数据
跑批总耗时
平台升级前后对比,Tez引擎优化后,全行跑批作业总耗时大幅下降,其中主干链路跑批从161小时降至68小时,提升2.3倍。
存储空间节省
平台升级前后对比,通过Tez引擎与Snappy/Zlib压缩,老平台存储3.64PB,新平台仅2.08PB,节省比例达42.9%,对应服务器及软件授权预算节省19.5%。
小微贷款审批时效
2025年3月策略上线后,实时风控中台支撑小微市民贷审批,策略自3月上线已发布7个版本,实现审批效率提升180倍,不良率0.75%。
以上数据根据报告摘要整理,具体统计口径和数值请以完整报告原文为准。
完整报告包含什么
- 完整数据中台十年演进历程:从TD到CDH再到MRS+DWS的详细技术路线与痛点分析。
- 湖仓一体系统架构图及组件说明:包括数据交换平台、实时计算Flink、元数据管理、统一调度等模块。
- Tez引擎30项参数调优实践与性能对比:DAG调度优化、存储压缩策略、跑批时效提升2.4倍的详细数据。
- 关键业务报表提速案例表:列出10个典型作业的新旧平台耗时对比,最高提速649倍。
- 实时风控独立集群部署方案:包括71套策略、4400+条规则的具体内容,以及反欺诈实时拦截案例。
- BI应用与数据赋能成效:BI看板数量、查询量、导出量年度增长数据,以及支持分支机构的自助分析实践。
- AI问数产品“燕讯”功能介绍:1000+标准化指标定义、自然语言查询示例、使用频率数据。
- 数据治理与安全管控:游离小数仓纳管、指标标准化、数据脱敏等具体措施。
- 村镇银行数据中台扩展应用:投管行与32家村镇银行的二级考核方案落地案例。
- 团队与资源配置:数据支持服务三年翻三倍,从245次增至783次,以及FCA/FCP认证人员统计。
本页内容由川海智库整理,用于帮助读者快速了解报告主题、核心观点和主要内容。由于报告量大、人工能力有限,部分观点、数据、统计口径或表述可能存在偏差,具体内容请以完整报告原文为准。





