案例名稱

銀行大數據智能分析平臺項目

案例簡介

為滿足日益增長的數據應用需求，國內某知名銀行客戶（以下簡稱“客戶”）聯合廣州思邁特軟件有限公司，開始建設基于Smartbi 的銀行大數據智能分析平臺項目，該平臺建設了統一的大數據智能分析平臺，提升了數據開發、管理、分析效率，實現賬號及權限的統一管理，在增強數據安全的基礎上方便使用。同時，通過建設標準化、易用性、安全性的自助分析平臺，充分發揮數據的價值。

項目上線后，該行已有眾多用戶在活躍地使用大數據智能平臺進行數據分析，創建了數以千計的的儀表盤、圖表、工作表與表格，業務人員都能自主快速地通過數據分析平臺構建數據分析應用，以科技智能帶動業務智能，深度融合科技與業務，取得效率與成本、風險更高層次的平衡。

創新技術/模式應用

在大數據時代下，業務數據的有效利用已成為銀行業務快速、健康發展的助推劑，客戶也將數據應用融入到了日常的經營、管理、營銷、風控中。并且隨著業務的快速發展，對數據的依賴性越來越強，日常數據提取和分析的需求量變得越來越多，于是便面臨這樣的困境：會數據分析的人不懂業務，而懂業務的人卻不會數據分析。往往一個數據分析需求的完成，最大的時間成本不是花在真正的取數、分析階段，而是在前期的需求溝通階段。在這種配合模式下，業務的數據分析需求總是在無盡的排期和等待中。

因此，某銀行希望基于Smartbi建設大數據智能分析平臺，讓業務人員可以減少對技術部門的依賴，可以自主地進行數據分析，以此來提升工作效率并促進全行數據化運營。

（1）項目總體架構

針對本項目具體架構如下，以大數據平臺為基礎，提供多數據源的對接。以數據預處理OLAP技術產品體系為核心，實現數據模型化管理，數據分析的預處理，高并發低延遲多維數據分析，ODBC/JDBC/MDX/RestAPI多通道數據訪問等功能。以SmartBI升級改造為應用主體，對接現有悟空平臺，能夠對接Excel表，方便數據分析的使用。

本次項目建設部署在水土數據分析環境，依托于大數據平臺，作為大數據平臺上的計算及應用模塊，實現數據自助智能分析功能。

數據智能分析平臺的數據體系結構包括3個層次：數據源層、數據模型層和數據應用層。

數據源層：提供多數據源對接能力，按需擴展數據源，實現數據統一。本項目中對接水土數據分析環境，以獨立的集群支持數據分析的數據需求。

數據模型層：提供可視化數據模型設計和管理能力實現數據模型統一，提供數據立方體預計算能力實現高并發低延遲多維數據分析，提供ODBC/JDBC/MDX/RestAPI多種數據訪問能力實現多維查詢統一，提供BI可視化、自助分析、WEB/APP數據應用、數據智能化Python等多種通道對接能力實現用數統一。數據模型層主要負責數據加工，把原始的數據如客戶信息、合同信息、交易流水數據，加工成面向主題分析的業務模型；整個實施過程分成源數據分析、MAPPING、ETL、數據標準化、測試等；最終形成的主題模型層，如個金部主題、公司業務主題、風險主題等，用于門戶系統的分析、挖掘工具的數據支撐。

數據應用層：通過Smartbi數據分析平臺，提供給“管理決策者”、“普通業務用戶”、“數據科學家”等用戶使用，這些不同層次數據消費者，看到的數據模型一致，獲取的數據也一致。實現報表可視化、多維分析、即席查詢、自助分析等基本功能，以及數據挖掘算法、機器學習等高級功能數據層面的完全統一。

（2）創新技術

· 大數據OLAP預處理分析技術

大數據OLAP預處理分析技術是對多維分析可能用到的維度和度量進行預計算，將計算好的結果保存成Cube，供查詢時直接訪問，把高復雜度的聚合運算、多表連接等操作轉換成對預計算結果的查詢，這決定了大數據OLAP預處理分析技術能夠擁有很好的快速查詢和高并發能力。

· 權限安全及多級授權

數據智能分析平臺提供一整套圍繞登錄用戶的信息及權限的管理機制。用戶在登入系統需要身份認證，密碼采用國密加密機制；平臺提供權限控制體系，它可以控制用戶功能權限、數據訪問權限、資源訪問權限。支持按用戶、用戶組、角色進行管理，支持多級用戶管理體系。

多級用戶管理機制是指當系統屬于多級組織架構，可以把用戶管理、權限管理下放給分級機構/組，使分級機構/組擁有管理權限的一種體制。整個安全性管理在企業內部可自頂向下的繼承和覆蓋，實現完備化、體系化的安全機制。

· 對接元數據管理，增加數據導航功能

項目通過對接元數據管理，在安全受控的前提下開放企業數據資產給用戶，業務用戶可以在數據資產中快速找到自己需要的數據，并且可以便捷進行數據權限申請。

用戶可以在“數據資產”中通過全文檢索的方式快速查詢平臺中有哪些數據可以使用。在權限受控的情況下，對于可用的數據，用戶可以通過查看脫敏后的數據，包括數據結構、數據預覽、血統分析，判斷是否為自己需要的數據。

項目效果評估

3、項目成效

大數據智能分析平臺的建設，既能提高業務人員獲取數據的能力，縮短平均數據訪問時間，提高工作效率；又能為科技部節省大量對其提供基本數據服務的時間，在加強數據管控的基礎上提升數據服務能力，實現數據分析的全面應用和推廣。

（1）提升業務分析人員在數據分析過程中所需要的性能效率，增強數據分析的應用及推廣落地；

（2）通過界面化、流程化的權限管控，實現多級在線授權功能，通過對數據權限的流程管理，簡化數據授權流程，提升數據權限申請的效率。通過加密、脫敏等方式提升數據使用的安全性，切實保障數據分析的安全及易用性要求；

（3）方便業務人員更好的進行數據分析，實現業務人員自助式分析數據的能力。

以前科技部門每個月處理的數據申請單在600張左右，現在下降到350張左右，大部分技術人員投入到更復雜的需求處理中；以前一張申請單從提出到完成需要7天，現在業務人員可自行處理，即使提需求也只需要2天即可完成。

項目牽頭人

蔣霞，項目經理

責任編輯：韓希宇