2025年3月6日 • 作者:DataPipeline
某辽宁省城商行是一家具有广泛影响力的区域性股份制商业银行,在辽宁省城商行中资产规模名列前茅,在全国多地设有网点200逾家,员工超过6000人。该银行多次荣获“全国支持中小企业发展十佳商业银行”称号,并在金融创新、普惠金融等领域屡获殊荣。在数据管理领域,该银行获得《数据管理能力成熟度评估模型》(DCMM)稳健级(3级)评级,成为东北地区首家获此殊荣的金融机构,充分展现了其在数据管理体系建设方面的先进性,为金融机构数字化转型树立了标杆。
随着业务场景的多元化,该银行原有数据体系面临多方面的严峻挑战,主要体现在以下四个方面:
· 数据集成环境复杂
银行的数据系统涉及多种计算机系统和操作系统,如AS/400、Linux等,以及不同版本的传统数据库,数据集成难度大,对系统的兼容性和稳定性提出了极高要求。
· 时效性要求高
银行现有的数据仓库系统主要通过文件传输方式采集各系统数据,然而,业务对数据的实时性要求极高,需要实现单秒级的实时数据采集,以确保数据的及时性和准确性,从而满足快速决策的需求。
· 灾备要求高
银行采用“两地三中心”的架构,要求具备同城容灾能力,以保障数据的安全性和业务的连续性,这对数据备份和恢复能力提出了极高标准。
· SLA难度高
银行数据体系涉及多种技术栈,且数据增量大,这使得服务水平协议(SLA)的达成难度显著增加,对系统性能和稳定性提出了更高要求。
DataPipeline助力烟台银行实时数据融合与计算平台上线
为满足行内发展战略规划和当下金融业务需求,该银行决定搭建一套近实时的业务数据流转平台,并选择了DataPipeline。DataPipeline企业级实时数据融合平台适配了MySQL、星环、Kafka等多种数据库管理技术,并打通了核心系统、网联平台、信用卡系统、基金代销系统、支付系统、冠字号管理系统、新一代OA系统、网银互联系统、银保通等多种业务系统。通过解析日志的方式,平台能够捕捉这些系统中异构数据的实时变化,并将其封装成消息流的形式,供给下游数据仓库与实时数据管理平台。最终,借助数据流计算平台,实现近实时地向各外围系统供数的目的。
实时数据融合平台架构
DataPipeline的解决方案特点包括:
▶ 全面集成异构数据
成功解决了AS/400实时数据同步的问题,实现了复杂环境下多种异构数据源的无缝集成,为数据的高效流转和处理奠定了坚实基础。
▶ 实时数据集成
构建多元异构的端到端数据链路,提供秒级低延迟的增量数据处理能力,确保数据的实时性和准确性,满足业务对数据时效性的高要求。
▶ 高可用和灾备架构
支持“两地三中心”的灾备架构,可在主备环境之间实现整体切换,无缝衔接业务运行。凭借其高可用性和卓越的灾备能力,该架构能够有效保障业务连续性,确保系统故障对业务的影响降至最低。
▶ 便捷运维易管理
提供系统管理功能和统一的可视化管理界面,显著提升了运维的自动化水平,降低了管理复杂度,提高了运维效率。
截至目前,项目已成功上线并稳定运行超过15个月,在此期间,平台高效支撑了该银行50多个应用系统。在同城容灾场景下,系统具备极高的数据完整性和业务连续性:数据零丢失(RPO=0),灾难恢复时间小于30分钟(RTO<30分钟)。此外,平台每日处理数据增量高达1.4亿行,数据传输延迟控制在3秒以内,充分满足高实时性业务需求。
DataPipeline为该银行提供了显著的业务和技术价值。从业务层面,通过秒级实时数据处理和“两地三中心”灾备架构,保障了数据时效性和业务连续性,满足快速决策需求。从技术层面,实现了异构数据源的无缝集成,提升了系统稳定性与运维效率,为银行的数字化转型筑牢基础,助力其稳健发展。
对项目上线效果,该银行给出了积极评价:“DataPipeline满足下游实时数据管理平台的数据时效性要求,全面覆盖信贷、风控等业务领域,有效降低了运维成本和难度。”
未来,双方将继续探索各类实时数据应用场景,进一步深化技术与业务的融合,推动金融服务创新。DataPipeline将助力该银行在数字化转型中实现更高效的数据驱动决策、更精准的客户服务以及更敏捷的业务响应,为“数字化新锦行”战略落地提供坚实支撑。