案例名稱

符合中小銀行質量提升的數據治理方案

案例簡介

在數字化轉型的驅動和數據治理“嚴監管”的推動下，為解決金融機構數據治理體系不健全、數據質量低下等問題，利用數據治理成熟度評估模型進行問題分析定位，重點圍繞數據規劃、組織機制、標準建設以及數據類平臺建設等方面進行數據質量提升。通過應用實踐，總結歸納形成全生命周期的數據治理體系，從平臺、標準、管理、質量四大方面應用技術手段有效提升金融數據質量和統計報送質量，且對其他中小銀行具有一定的參考性和可復用性。

創新技術/模式應用

1.1 應用工具做好規劃，建立金融數據管理提升路徑

1.1.1 數據治理成熟度評估模型

圖1 數據治理框架

1.2 機制和管理先行，為質量提升提供制度保障

1.2.1 組織架構和制度建設

圖2 數據治理組織架構

1.2.2 標準建設

標準建設主要包括技術標準、指標標準和指標口徑建設。

·詞根：使用金融行業常用英文縮寫，保證技術和業務也能通過字段名理解字段含義。

圖3 數據平臺詞根

·數據字典：包括碼值、字段長度等各類技術說明，保證數據開發人員使用數據的來源一致性。

圖4 數據字典

·模型規范：建設9大主題模型，將數據進行有效歸類，實現數據開發人員的快速入手。

圖5 主題模型分類

·開發規范：形成統一開發，保證技術平臺和底層代碼的一致性，降低維護成本和學習成本。

·指標標準：形成行業規范標準，標注規范來源，實現與監管要求一致。

圖6 指標標準

·指標口徑：實現技術口徑和業務口徑的統一管理，降低業務和技術的門檻。

圖7 指標口徑

1.3 夯實系統功能，實現數據全面管控提升報送質量

1.3.1 數據平臺建設 

數據平臺包括數據開發平臺、數據基礎平臺、數據模型三部分。

·數據開發平臺

根據詞根和數據開發規范等建立統一的可視化、組件化、流程化的數據開發平臺，實現代碼線上化管理模式。

圖8 數據開發模板

·基礎平臺建設

數據平臺采用Hadoop作為底層基礎，搭配hdfs、yarn等基礎組件實現數據存儲、計算等功能，為海量數據的存儲和計算提供了高性能的平臺基礎。

圖9 數據平臺基礎架構

·數據平臺模型

數據平臺模型保證了數據開發、數據存儲、數據計算的統一，形成了標準化的流程模型。

圖10 數據模型架構

1.3.2 數據治理平臺建設 

數據治理平臺涵蓋元數據采集、數據標準管理、數據血緣管理到數據質量監控等數據全生命周期的管理。

圖11 數據治理平臺

1.3.3 指標平臺建設 

指標管理平臺實現指標線上流程化管理、指標的統一存儲和共享、血緣關系追蹤。

圖12 指標平臺

1.3.4 統一報送平臺建設 

統一報送平臺支持業務數據的統一補錄核對和復雜的信息檢索，實現各類監管報送的統一登錄、統一整合、統一指標、統一展現、統一管理，進行監管報送集中管理。

項目效果評估

通過實踐經驗，形成了數據平臺、數據治理平臺、統一報送平臺的建設方案，并將開發規范納入數據治理標準體系建設，應用大數據和人工智能技術實現數據全流程管控，歸納總結形成數據治理體系方案。

1、數據質量的提升和金融統計質量的提升

一、根據數據治理成熟度評估模型應用方法以及調查問卷信息，通過組織、機制、流程和平臺建設，確保數據治理流程在系統中有序的開展，有規劃性地提升開發質量。

二、通過數據治理平臺質量監控實現源頭數據的提升，實現客戶信息和交易的質量提升，確保證件號碼與各類信息區域的一致性，地址與區域的統一管理等，使質量提升有了抓手。

三、提升源頭數據質量、建立各類交叉、勾稽校驗規則，為金融統計在行業分類、涉農、科目產品分類等方面的質量提升提供了技術和數據的保證，實現了金融統計工作的提質增效。

四、全面梳理各報表口徑，將“口口相傳”的統計口徑梳理成對應的技術語言，落地到指標；建立全面、完整的指標體系，實現數據的共用共享。

2、金融數據治理方案可復用性

鄞州銀行的現狀與大部分中小銀行所處的階段基本一致，從數據管理到平臺建設的方案符合中小銀行的數據治理訴求,可復制推廣到其他金融機構，從而提升數據質量。整體數據治理方案主要包括制度、標準和平臺建設、涵蓋數據治理的全流程管控，盡可能的通過技術手段去發現數據質量問題，從而降低人員的人力投入。

3、可視化展示實現業務數據的理解

傳統銀行的分析系統，存在“煙囪式”架構，獨立的登錄界面和用戶管理，導致數據和分析成果無法共享。同時業務人員過度依賴技術人員實現分析需求，導致效率太低，相似需求不斷重復，數據的利用率也不夠。通過建設數據平臺和統一報送平臺，將基礎數據和匯總數據進行了全面的整合，實現數據的共用共享，業務人員可通過一個平臺實現可拖拉拽的功能，從匯總指標到數據明細進行自主的數據分析和挖掘，一方面可以更快地核對數據，另一方面，可以更加高效地為經營管理提供數據支撐。

項目牽頭人

許曉杰 科技部副總/大數據管理部總經理

項目團隊成員

邵杰、鄭嘎、童月飛、王彭林、黃炎

責任編輯：王超