案例名稱

符合中小銀行質(zhì)量提升的數(shù)據(jù)治理方案

案例簡介

(相關(guān)資料圖)

在數(shù)字化轉(zhuǎn)型的驅(qū)動(dòng)和數(shù)據(jù)治理“嚴(yán)監(jiān)管”的推動(dòng)下，為解決金融機(jī)構(gòu)數(shù)據(jù)治理體系不健全、數(shù)據(jù)質(zhì)量低下等問題，利用數(shù)據(jù)治理成熟度評估模型進(jìn)行問題分析定位，重點(diǎn)圍繞數(shù)據(jù)規(guī)劃、組織機(jī)制、標(biāo)準(zhǔn)建設(shè)以及數(shù)據(jù)類平臺(tái)建設(shè)等方面進(jìn)行數(shù)據(jù)質(zhì)量提升。通過應(yīng)用實(shí)踐，總結(jié)歸納形成全生命周期的數(shù)據(jù)治理體系，從平臺(tái)、標(biāo)準(zhǔn)、管理、質(zhì)量四大方面應(yīng)用技術(shù)手段有效提升金融數(shù)據(jù)質(zhì)量和統(tǒng)計(jì)報(bào)送質(zhì)量，且對其他中小銀行具有一定的參考性和可復(fù)用性。

創(chuàng)新技術(shù)/模式應(yīng)用

1.1應(yīng)用工具做好規(guī)劃，建立金融數(shù)據(jù)管理提升路徑

1.1.1數(shù)據(jù)治理成熟度評估模型

圖1 數(shù)據(jù)治理框架

1.2機(jī)制和管理先行，為質(zhì)量提升提供制度保障

1.2.1組織架構(gòu)和制度建設(shè)

圖2 數(shù)據(jù)治理組織架構(gòu)

1.2.2標(biāo)準(zhǔn)建設(shè)

標(biāo)準(zhǔn)建設(shè)主要包括技術(shù)標(biāo)準(zhǔn)、指標(biāo)標(biāo)準(zhǔn)和指標(biāo)口徑建設(shè)。

·詞根：使用金融行業(yè)常用英文縮寫，保證技術(shù)和業(yè)務(wù)也能通過字段名理解字段含義。

圖3 數(shù)據(jù)平臺(tái)詞根

·數(shù)據(jù)字典：包括碼值、字段長度等各類技術(shù)說明，保證數(shù)據(jù)開發(fā)人員使用數(shù)據(jù)的來源一致性。

圖4 數(shù)據(jù)字典

·模型規(guī)范：建設(shè)9大主題模型，將數(shù)據(jù)進(jìn)行有效歸類，實(shí)現(xiàn)數(shù)據(jù)開發(fā)人員的快速入手。

圖5 主題模型分類

·開發(fā)規(guī)范：形成統(tǒng)一開發(fā)，保證技術(shù)平臺(tái)和底層代碼的一致性，降低維護(hù)成本和學(xué)習(xí)成本。

·指標(biāo)標(biāo)準(zhǔn)：形成行業(yè)規(guī)范標(biāo)準(zhǔn)，標(biāo)注規(guī)范來源，實(shí)現(xiàn)與監(jiān)管要求一致。

圖6 指標(biāo)標(biāo)準(zhǔn)

·指標(biāo)口徑：實(shí)現(xiàn)技術(shù)口徑和業(yè)務(wù)口徑的統(tǒng)一管理，降低業(yè)務(wù)和技術(shù)的門檻。

圖7 指標(biāo)口徑

1.3夯實(shí)系統(tǒng)功能，實(shí)現(xiàn)數(shù)據(jù)全面管控提升報(bào)送質(zhì)量

1.3.1數(shù)據(jù)平臺(tái)建設(shè)

數(shù)據(jù)平臺(tái)包括數(shù)據(jù)開發(fā)平臺(tái)、數(shù)據(jù)基礎(chǔ)平臺(tái)、數(shù)據(jù)模型三部分。

·數(shù)據(jù)開發(fā)平臺(tái)

根據(jù)詞根和數(shù)據(jù)開發(fā)規(guī)范等建立統(tǒng)一的可視化、組件化、流程化的數(shù)據(jù)開發(fā)平臺(tái)，實(shí)現(xiàn)代碼線上化管理模式。

圖8 數(shù)據(jù)開發(fā)模板

·基礎(chǔ)平臺(tái)建設(shè)

數(shù)據(jù)平臺(tái)采用Hadoop作為底層基礎(chǔ)，搭配hdfs、yarn等基礎(chǔ)組件實(shí)現(xiàn)數(shù)據(jù)存儲(chǔ)、計(jì)算等功能，為海量數(shù)據(jù)的存儲(chǔ)和計(jì)算提供了高性能的平臺(tái)基礎(chǔ)。

圖9 數(shù)據(jù)平臺(tái)基礎(chǔ)架構(gòu)

·數(shù)據(jù)平臺(tái)模型

數(shù)據(jù)平臺(tái)模型保證了數(shù)據(jù)開發(fā)、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)計(jì)算的統(tǒng)一，形成了標(biāo)準(zhǔn)化的流程模型。

圖10 數(shù)據(jù)模型架構(gòu)

1.3.2數(shù)據(jù)治理平臺(tái)建設(shè)

數(shù)據(jù)治理平臺(tái)涵蓋元數(shù)據(jù)采集、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)血緣管理到數(shù)據(jù)質(zhì)量監(jiān)控等數(shù)據(jù)全生命周期的管理。

圖11 數(shù)據(jù)治理平臺(tái)

1.3.3指標(biāo)平臺(tái)建設(shè)

指標(biāo)管理平臺(tái)實(shí)現(xiàn)指標(biāo)線上流程化管理、指標(biāo)的統(tǒng)一存儲(chǔ)和共享、血緣關(guān)系追蹤。

圖12 指標(biāo)平臺(tái)

1.3.4統(tǒng)一報(bào)送平臺(tái)建設(shè)

統(tǒng)一報(bào)送平臺(tái)支持業(yè)務(wù)數(shù)據(jù)的統(tǒng)一補(bǔ)錄核對和復(fù)雜的信息檢索，實(shí)現(xiàn)各類監(jiān)管報(bào)送的統(tǒng)一登錄、統(tǒng)一整合、統(tǒng)一指標(biāo)、統(tǒng)一展現(xiàn)、統(tǒng)一管理，進(jìn)行監(jiān)管報(bào)送集中管理。

項(xiàng)目效果評估

通過實(shí)踐經(jīng)驗(yàn)，形成了數(shù)據(jù)平臺(tái)、數(shù)據(jù)治理平臺(tái)、統(tǒng)一報(bào)送平臺(tái)的建設(shè)方案，并將開發(fā)規(guī)范納入數(shù)據(jù)治理標(biāo)準(zhǔn)體系建設(shè)，應(yīng)用大數(shù)據(jù)和人工智能技術(shù)實(shí)現(xiàn)數(shù)據(jù)全流程管控，歸納總結(jié)形成數(shù)據(jù)治理體系方案。

1、數(shù)據(jù)質(zhì)量的提升和金融統(tǒng)計(jì)質(zhì)量的提升

一、根據(jù)數(shù)據(jù)治理成熟度評估模型應(yīng)用方法以及調(diào)查問卷信息，通過組織、機(jī)制、流程和平臺(tái)建設(shè)，確保數(shù)據(jù)治理流程在系統(tǒng)中有序的開展，有規(guī)劃性地提升開發(fā)質(zhì)量。

二、通過數(shù)據(jù)治理平臺(tái)質(zhì)量監(jiān)控實(shí)現(xiàn)源頭數(shù)據(jù)的提升，實(shí)現(xiàn)客戶信息和交易的質(zhì)量提升，確保證件號(hào)碼與各類信息區(qū)域的一致性，地址與區(qū)域的統(tǒng)一管理等，使質(zhì)量提升有了抓手。

三、提升源頭數(shù)據(jù)質(zhì)量、建立各類交叉、勾稽校驗(yàn)規(guī)則，為金融統(tǒng)計(jì)在行業(yè)分類、涉農(nóng)、科目產(chǎn)品分類等方面的質(zhì)量提升提供了技術(shù)和數(shù)據(jù)的保證，實(shí)現(xiàn)了金融統(tǒng)計(jì)工作的提質(zhì)增效。

四、全面梳理各報(bào)表口徑，將“口口相傳”的統(tǒng)計(jì)口徑梳理成對應(yīng)的技術(shù)語言，落地到指標(biāo)；建立全面、完整的指標(biāo)體系，實(shí)現(xiàn)數(shù)據(jù)的共用共享。

2、金融數(shù)據(jù)治理方案可復(fù)用性

鄞州銀行的現(xiàn)狀與大部分中小銀行所處的階段基本一致，從數(shù)據(jù)管理到平臺(tái)建設(shè)的方案符合中小銀行的數(shù)據(jù)治理訴求,可復(fù)制推廣到其他金融機(jī)構(gòu)，從而提升數(shù)據(jù)質(zhì)量。整體數(shù)據(jù)治理方案主要包括制度、標(biāo)準(zhǔn)和平臺(tái)建設(shè)、涵蓋數(shù)據(jù)治理的全流程管控，盡可能的通過技術(shù)手段去發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題，從而降低人員的人力投入。

3、可視化展示實(shí)現(xiàn)業(yè)務(wù)數(shù)據(jù)的理解

傳統(tǒng)銀行的分析系統(tǒng)，存在“煙囪式”架構(gòu)，獨(dú)立的登錄界面和用戶管理，導(dǎo)致數(shù)據(jù)和分析成果無法共享。同時(shí)業(yè)務(wù)人員過度依賴技術(shù)人員實(shí)現(xiàn)分析需求，導(dǎo)致效率太低，相似需求不斷重復(fù)，數(shù)據(jù)的利用率也不夠。通過建設(shè)數(shù)據(jù)平臺(tái)和統(tǒng)一報(bào)送平臺(tái)，將基礎(chǔ)數(shù)據(jù)和匯總數(shù)據(jù)進(jìn)行了全面的整合，實(shí)現(xiàn)數(shù)據(jù)的共用共享，業(yè)務(wù)人員可通過一個(gè)平臺(tái)實(shí)現(xiàn)可拖拉拽的功能，從匯總指標(biāo)到數(shù)據(jù)明細(xì)進(jìn)行自主的數(shù)據(jù)分析和挖掘，一方面可以更快地核對數(shù)據(jù)，另一方面，可以更加高效地為經(jīng)營管理提供數(shù)據(jù)支撐。

項(xiàng)目牽頭人

許曉杰 科技部副總/大數(shù)據(jù)管理部總經(jīng)理

項(xiàng)目團(tuán)隊(duì)成員

邵杰、鄭嘎、童月飛、王彭林、黃炎

關(guān)鍵詞：