5.王文波-翼支付基于大数据生态构建企业级数据仓库的实践

1 .

2 .翼支付基于大数据生态构建 企业级数据仓库的实践 翼支付 王文波 

3 .目录 一 翼支付简介 二 翼支付大数据发展历程 三 翼支付数智中台实践 四 未来展望 

4 .天翼电子商务有限公司（以下简称“翼支付”）是中国电信集团有限公司的成员企业， 是国资委双百改革和发改委第四批混改“双试点”企业，也是“双试点”企业中唯 一的金融科技公司。公司以翼支付APP为载体，面向7000万月活用户，提供民生缴费、 消费购物、金融理财等服务内容，依托区块链、云计算、大数据、人工智能等技术， 赋能超1000万家线下商户门店及170余家线上知名电商。 秉持“响应监管、服务民生、资源共享、合作多赢”的理念，聚焦“开放、安全、便 捷”的核心产品力，翼支付坚持通过服务投入与产品升级，构建贴合需求的管理与业 务体系，以交流融合的业务实践，推动产业各方实现数字化转型。 

5 .实施“人才发展引领企业发展” 设立天翼数字科技有限公司 提出“一梁三柱”发展战略 设立先分公司 获得国家级高新技术企业认定 战略 完 成 二 轮 引战 ， 累 计融 资 入选国资委“双百行动”试 上线私有云系统 获得基金销售支付结算牌照 20亿 点，完成首轮引战 年交易额超万亿 账户用户累计达1亿户 提出“高速度高质量发展” 实施员工持股计划 设立天翼商业保理有限公司 2022 2020 2018 2016 2014 2021 2019 2017 2015 2013 入选发改委第四批混改试点 成立公司党委 获得企业征信牌照 获得国家金卡工 制定公司“十四五”战略 创新翼支付红包，开展全国 程金蚂蚁奖 设立甜橙融资租赁有限公司， 收购甜橙保险代理 规划 有限公司 “525”活动 参股众安小额贷款有限公司 设立天翼融资担保公司 累计利润首次为正 创新橙分期产品 设立32省分公司 

6 .目录 一 翼支付简介 二 翼支付大数据发展历程 三 翼支付数智中台实践 四 未来展望 

7 . 翼支付大数据发展历程 01 02 野蛮 数智 生长 中台 烟囱式开发 数据资产化 需求驱动 能力沉淀 

8 .烟囱式开发带来的问题及挑战 烟囱式开发 数据成 时效要 数据管 需求交 本高企 求高 理及维 付时效 护难 要求高 重复建设、资 爆发性增长 计算及查询 分层架构不 业务的快速 源浪费、一致 的数据量及 时效不满足 清晰、管理 发展，对响 性带来业务困 计算需求， 日益发展的 无序、任务 应及需求迭 扰 带来数据成 业务高时效 网状依赖且 代交付效率 本的高企， 诉求 依赖层次较 越来越高 服务器增长 深，最深依 的边际效益 赖达十几层 越来越低 1 2 3 4 5 

9 .目录 一 翼支付简介 二 翼支付大数据发展历程 三 翼支付数智中台实践 四 未来展望 

10 .翼支付数智中台体系介绍 

11 . 翼支付数智中台实践 烟囱式数据开发 统一数仓分层架构 数仓分层 简述 数 APP(数据应用层) 数 据 APP 应用场景驱动，定制化拼装 据 APP1 APP2 APP3 应 应 用 DM(个性化数据集市) DM 各业务线个性化指标及业务 分析主题数据加工 用 数仓分层 简述 … 业务分析主题驱动，业务分 DWM（公共数据集市） DWM 析主题宽表 数 DIM( DWS 明细宽表及汇总模型层 DM3 仓 DWS（汇总数据层） 维度 DM1 DM2 公 层) 数 DIM 一致性维度层 仓 共 DWD（明细数据层） 层 层 DWD 明细事实层，业务过程建模 驱动 ODS ODS ODS 贴源层，源业务系统的数据 快照 业 业 务 生产库 务 生产库 系 系 统 统 

12 .翼支付数智中台实践 数据规范建模 构建数据总线矩阵，划分业务域、数据域，制定表、字段命名标准及各分层职责边界 规范指标定义，进行指标梳理及拆解，搭建指标平台进行指标统一管理，消除指标二义 数据指标体系 性 计算引擎优化 优 化 调 整 离 线 计 算 引 擎 由 H i ve 全 面 切 换 至 S p a r k ， 并 持 续 进 行 S p a r k 引 擎 优 化 SLA及数据质 事前构建敏捷开发流程、事中依托平台搭建数据质量稽核模块、事后数据质量复盘总结 量保障 优化 

13 .翼支付数智中台实践 经过一年多的数智中台建设及实践，初步取得一些阶段性成果： 计算成本 计算时效 查询时效 算力降低 提升4030% 87.9% 提前7.5小时 13:30 6:00 业务线A看板查询时效 算力降低 模型A特征计算时效 提升9760% 提前8.5小时 计算成本降低 87.9% 13:30 5:00 业务线B看板查询时效 计算成本降低 核心看板计算时效 

14 .目录 一 翼支付简介 二 翼支付大数据发展历程 三 翼支付数智中台实践 四 未来展望 

15 .未来展望 数据治理常态化 数据智能化 未来已来 湖仓一体 

16 .

17 .