袋鼠云助力銀行機構(gòu)數(shù)據(jù)治理,構(gòu)建全行數(shù)據(jù)資產(chǎn)體系

近年來,隨著信息化、數(shù)字化、智能化的快速發(fā)展,數(shù)據(jù)從資源逐漸轉(zhuǎn)變?yōu)橘Y產(chǎn)。金融行業(yè)具有海量數(shù)據(jù)資源和豐富應(yīng)用場景優(yōu)勢,在企業(yè)經(jīng)營管理、產(chǎn)品研發(fā)、技術(shù)創(chuàng)新等關(guān)鍵環(huán)節(jié)中發(fā)揮著重要作用。數(shù)據(jù)治理作為釋放數(shù)據(jù)價值的基礎(chǔ),在推動銀行數(shù)字化轉(zhuǎn)型的過程中扮演了“承上啟下”的關(guān)鍵角色。

袋鼠云通過數(shù)據(jù)治理咨詢,結(jié)合數(shù)據(jù)平臺建設(shè)和數(shù)據(jù)應(yīng)用實施,構(gòu)建科學的組織架構(gòu)體系,完善數(shù)據(jù)治理流程制度與規(guī)范,建立數(shù)字化協(xié)同機制,整合并打通銀行內(nèi)多源、零散的異構(gòu)數(shù)據(jù)體系,構(gòu)建全行業(yè)數(shù)據(jù)資產(chǎn)體系,完善數(shù)據(jù)權(quán)限、數(shù)據(jù)血緣、數(shù)據(jù)質(zhì)量、分級分類等管理體系,借助數(shù)據(jù)產(chǎn)品對數(shù)據(jù)資產(chǎn)進行深度加工挖掘價值,面向零售、風險、財務(wù)等輸出更加全面的數(shù)據(jù)及統(tǒng)計指標,推動銀行業(yè)務(wù)數(shù)字化轉(zhuǎn)型。(了解袋鼠云https://www.dtstack.com/?src=meiti)

銀行機構(gòu)數(shù)據(jù)治理解決方案

| 基于數(shù)據(jù)盤點構(gòu)建全行級數(shù)據(jù)資源目錄

數(shù)據(jù)資產(chǎn)盤點有實體盤點,第一點是設(shè)計分類框架,為了方便對數(shù)據(jù)資產(chǎn)進行管理,需要對數(shù)據(jù)資產(chǎn)進行分類,按照業(yè)內(nèi)慣例,一般分為三級分類。分類依據(jù)可參考企業(yè)的流程框架,按照業(yè)務(wù)分類進行分類。

第二點是明確盤點范圍,對人力、財務(wù)、營銷業(yè)務(wù)系統(tǒng)中的業(yè)務(wù)對象進行盤點,需要系統(tǒng)開發(fā)人員、業(yè)務(wù)人員共同參與,解決梳理過程中遇到的業(yè)務(wù)和技術(shù)問題。

第三點要注意盤點的內(nèi)容,也就是盤點業(yè)務(wù)實體對象。

除了實體盤點外還有數(shù)據(jù)項盤點。數(shù)據(jù)項的盤點依賴于實體的盤點,每個實體有若干個數(shù)據(jù)項,數(shù)據(jù)項是業(yè)務(wù)開展的基礎(chǔ)屬性,這些屬性可以從業(yè)務(wù)系統(tǒng)界面獲取,也可以從后臺獲取。

銀行數(shù)據(jù)資源目錄

l基于數(shù)據(jù)標準的規(guī)范化ETL數(shù)據(jù)建模體系

數(shù)據(jù)標準是進行數(shù)據(jù)標準化、消除數(shù)據(jù)業(yè)務(wù)歧義的主要參考和依據(jù)。對數(shù)據(jù)標準進行分類,將有利于數(shù)據(jù)標準的編制、查詢、落地和維護。數(shù)據(jù)標準有多種分類方式,對于不同的分類方式,均可采用以數(shù)據(jù)元為數(shù)據(jù)標準制定的基本單元構(gòu)建數(shù)據(jù)標準體系。

數(shù)據(jù)可以分為基礎(chǔ)類數(shù)據(jù)和指標類數(shù)據(jù)。基礎(chǔ)類數(shù)據(jù)指業(yè)務(wù)流程中直接產(chǎn)生的,未經(jīng)過加工和處理的基礎(chǔ)業(yè)務(wù)信息。指標類數(shù)據(jù)是指具備統(tǒng)計意義的基礎(chǔ)類數(shù)據(jù),通常由一個或以上的基礎(chǔ)數(shù)據(jù)根據(jù)一定的統(tǒng)計規(guī)則計算而得到。

相應(yīng)地,數(shù)據(jù)標準也可以分為基礎(chǔ)類數(shù)據(jù)標準或指標類數(shù)據(jù)標準?;A(chǔ)類數(shù)據(jù)標準是為了統(tǒng)一企業(yè)所有業(yè)務(wù)活動相關(guān)數(shù)據(jù)的一致性和準確性,解決業(yè)務(wù)間數(shù)據(jù)一致性和數(shù)據(jù)整合,按照數(shù)據(jù)標準管理過程制定的數(shù)據(jù)標準。指標類數(shù)據(jù)標準一般分為基礎(chǔ)指標標準和計算指標(又稱組合指標)標準。

基礎(chǔ)類數(shù)據(jù)標準和指標類數(shù)據(jù)標準通過分別建立基礎(chǔ)類數(shù)據(jù)元和指標類數(shù)據(jù)元,并將基礎(chǔ)類數(shù)據(jù)元和指標類數(shù)據(jù)元與數(shù)據(jù)映射,實現(xiàn)基礎(chǔ)類數(shù)據(jù)標準和指標類數(shù)據(jù)標準的落地。

具體來說,對于結(jié)構(gòu)化數(shù)據(jù)中的任意一個字段,當其不具備指標特征時,可直接將其與某一業(yè)務(wù)類別下的基礎(chǔ)類數(shù)據(jù)元(如包含命名規(guī)則、數(shù)據(jù)類型和值域等屬性)映射,實現(xiàn)該字段的標準化(符合命名規(guī)則、數(shù)據(jù)類型和值域的規(guī)定);當其具備指標特征時,可直接將其與某一業(yè)務(wù)類別下的指標類數(shù)據(jù)元(如命名規(guī)則、約束規(guī)則、數(shù)據(jù)類型和值域等)映射,實現(xiàn)該字段的標準化(符合命名規(guī)則、約束規(guī)則、數(shù)據(jù)類型和值域的規(guī)定)。

銀行數(shù)據(jù)模型體系

l基于法律法規(guī)構(gòu)建數(shù)據(jù)分級分類體系

根據(jù)《個人金融信息保護技術(shù)規(guī)范》(JR/T 0171-2020)及《某銀行數(shù)據(jù)安全管理辦法》要求,個人客戶C3、C2類別信息在后臺管理與業(yè)務(wù)支撐系統(tǒng)展示時,除銀行卡有效期外,C3 類別信息不應(yīng)明文展示;C2類中支付賬號、客戶法定名稱、支付預(yù)留手機號碼、證件類或其他類識別標識信息應(yīng)當做遮蔽處理,且不提供批量查詢和批量下載功能。

如特殊情況C2類上述敏感字段仍需完整展示或明文下載,則必須有如下管控措施:

1)需求提出部門必須限定最小用戶使用范圍,并經(jīng)過本部門總經(jīng)理(如果是分行,則為分行主要負責人)審批授權(quán)。審批單參照《某銀行個人分類分級數(shù)據(jù)授權(quán)審批單》,并在OA項目需求發(fā)起時必須含有該審批單附件。

2)系統(tǒng)內(nèi)應(yīng)當做好相關(guān)角色權(quán)限的設(shè)置和管控。

3)C2類中支付賬號、客戶法定名稱、支付預(yù)留手機號碼、證件類或其他類識別標識信息前臺頁面展現(xiàn)需增加水印處理,禁止復(fù)制粘貼;且批量下載時文件必須通過DRM加密,并經(jīng)過審批授權(quán)流程,審批授權(quán)至少至分管部門總經(jīng)理或分行主要負責人。

4)個人客戶C2類敏感信息在做批量查詢或者下載必須有審計日志功能,必須明確誰在什么時間,什么場景使用,使用權(quán)限范圍,審批流程等,日志支持前臺頁面查詢。

5)所有數(shù)據(jù)使用均遵循“誰使用誰負責”的原則。

6)以上管控措施涉及應(yīng)用系統(tǒng)開發(fā)的,應(yīng)該在開發(fā)全流程中形成閉環(huán)管控機制(包含相關(guān)業(yè)務(wù)需求的提出到業(yè)務(wù)驗收測試環(huán)節(jié))。對于涉及上述敏感信息展示但沒有提供經(jīng)領(lǐng)導(dǎo)審批的《某銀行個人分類分級數(shù)據(jù)授權(quán)審批單》,一律不予啟動開發(fā)。

7)涉及業(yè)務(wù)部門授權(quán)審批的管理環(huán)節(jié),需求提出部門需要做好相關(guān)審批授權(quán)文檔的存檔,以備后續(xù)審查。

銀行數(shù)據(jù)分級分類體系

銀行機構(gòu)數(shù)據(jù)治理交付內(nèi)容

l數(shù)據(jù)治理咨詢

協(xié)助完善數(shù)據(jù)治理組織架構(gòu)(涵蓋數(shù)據(jù)治理決策層、管理層和執(zhí) 行層)及數(shù)據(jù)治理相關(guān)的制度、流程和評估標準。完善數(shù)據(jù)標準,完成10個系統(tǒng)的數(shù)據(jù)對標,并完成主數(shù)據(jù)和元數(shù)據(jù)的梳理。建立數(shù)據(jù)質(zhì)量的檢核、整改、評價等工作流程,提升數(shù)據(jù)質(zhì)量。制定數(shù)據(jù)資產(chǎn)盤點、評估與管理工作機制,完成10個系統(tǒng)的數(shù)據(jù)資產(chǎn)盤點。構(gòu)建指標管理體系,協(xié)助梳理全行基礎(chǔ)指標。

l數(shù)據(jù)平臺建設(shè)

數(shù)據(jù)平臺包含數(shù)據(jù)治理平臺和數(shù)據(jù)應(yīng)用平臺,實現(xiàn)數(shù)據(jù)的“管、 治、用”。數(shù)據(jù)治理平臺提供離線開發(fā)、數(shù)據(jù)標準、數(shù)據(jù)建模、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)、元數(shù)據(jù)、指標管理、數(shù)據(jù)資產(chǎn)和數(shù)據(jù)安全等功能,實現(xiàn)數(shù)據(jù)開發(fā)與治理一體化。數(shù)據(jù)應(yīng)用平臺包括數(shù)據(jù)智能分析模塊,提供有效的數(shù)據(jù)分析工具,滿足靈活性、安全性和便利性。

l數(shù)據(jù)應(yīng)用實施

完成面向大數(shù)據(jù)平臺的數(shù)據(jù)血緣關(guān)系梳理。重構(gòu)大數(shù)據(jù)平臺中間層(200 張表)數(shù)據(jù)模型,并進行落標實施。根據(jù)數(shù)據(jù)質(zhì)量檢核規(guī)則,在數(shù)據(jù)平臺上對源頭數(shù)據(jù)和結(jié)果數(shù)據(jù)進 行規(guī)則稽核。

結(jié)合營銷與風控應(yīng)用場景,完成至少200個基礎(chǔ)指標加工。提供不少于 5 個建模場景要求的數(shù)據(jù)支持和不少5個應(yīng)用場景的功能支持(開展數(shù)據(jù)自主分析、開發(fā)報表和管理駕駛艙等)。

銀行機構(gòu)數(shù)據(jù)治理建設(shè)成果

l數(shù)據(jù)治理成果

一是數(shù)據(jù)治理戰(zhàn)略目標,治理頂層設(shè)計、治理目標、治理運營、治理成果等數(shù)據(jù)治理相關(guān)的戰(zhàn)略規(guī)劃設(shè)計材料。

二是治理組織及規(guī)章,設(shè)計某銀行數(shù)據(jù)治理組織架構(gòu),并根據(jù)數(shù)據(jù)治理目標定制相關(guān)的規(guī)章制度來保障治理落地。

三是治理實現(xiàn)路徑,明確某銀行數(shù)據(jù)治理工作的實施路徑,細化數(shù)據(jù)治理工作的關(guān)鍵步驟并交付相關(guān)文件給某銀行。

四是治理考核及運營,結(jié)合某銀行數(shù)字化考核目標制定數(shù)據(jù)治理考核方案,并提供數(shù)據(jù)治理支持運營及優(yōu)化的方法論材料。

五是數(shù)據(jù)資產(chǎn)目錄,梳理某銀行業(yè)務(wù)系統(tǒng)、數(shù)據(jù)倉庫的數(shù)據(jù)資源,完善數(shù)據(jù)各項屬性元數(shù)據(jù),構(gòu)建全行級數(shù)據(jù)資產(chǎn)目錄。

六是數(shù)據(jù)標準體系,梳理某銀行現(xiàn)有的數(shù)據(jù)內(nèi)容,搭建圍繞基礎(chǔ)類數(shù)據(jù)和指標類數(shù)據(jù)兩大標準體系,并完成歷史數(shù)據(jù)落標工作。

七是分級分類體系,按照人行數(shù)據(jù)分級分類指南相關(guān)規(guī)劃構(gòu)建某銀行數(shù)據(jù)分級體系,并完成歷史數(shù)據(jù)的分級分類工作。

八是數(shù)據(jù)治理體系,圍繞人行、銀保監(jiān)數(shù)據(jù)報送校驗規(guī)則結(jié)合某銀行數(shù)據(jù)加工過程校驗規(guī)則,構(gòu)建全行級數(shù)據(jù)質(zhì)量監(jiān)控規(guī)則體系。

l平臺實施成果

一是大數(shù)據(jù)平臺血緣解析,某銀行ImpalaSQL的ETL任務(wù)進行數(shù)據(jù)血緣解析,包括表血緣、字段血緣等信息,同時借助袋鼠云數(shù)據(jù)平臺實現(xiàn)跨系統(tǒng)數(shù)據(jù)交換的血緣關(guān)系。

二是數(shù)據(jù)質(zhì)量規(guī)則體系搭建,圍繞銀保監(jiān)East4.0/5.0數(shù)據(jù)質(zhì)量規(guī)范,構(gòu)建監(jiān)管數(shù)據(jù)檢核規(guī)則,包括監(jiān)管報表單體校驗、跨系統(tǒng)數(shù)據(jù)校驗(1104與East)、溯源數(shù)據(jù)質(zhì)量檢驗等信息。同時,根據(jù)人行反洗錢監(jiān)管要求構(gòu)建交易對手信息檢核滿足人行反洗錢檢查要求。

三是大數(shù)據(jù)模型重構(gòu),根據(jù)某銀行項目要求重構(gòu)大數(shù)據(jù)平臺中間層(近200 張表)數(shù)據(jù)模型,通過數(shù)據(jù)模型平臺進行模型設(shè)計、模型建標和模型落標,并通過行內(nèi)現(xiàn)有數(shù)據(jù)進行模型驗證。

四是指標體系設(shè)計及搭建,結(jié)合某銀行在信貸營銷與風控領(lǐng)域的應(yīng)用場景調(diào)研指標體系,并針對業(yè)務(wù)實際需求完成至少200個基礎(chǔ)指標加工及復(fù)雜衍生指標搭建;梳理數(shù)據(jù)資產(chǎn)(包括核心、信貸、 網(wǎng)貸等至少10個系統(tǒng))并搭建數(shù)據(jù)資產(chǎn)目錄;根據(jù)監(jiān)管及內(nèi)部管理需求梳理數(shù)據(jù)標準體系并通過平臺落地;圍繞人行金融數(shù)據(jù)分級分類規(guī)范搭建某銀行數(shù)據(jù)分級體系并結(jié)合銀保監(jiān)數(shù)據(jù)加密規(guī)范實現(xiàn)數(shù)據(jù)安全保障體系。

五是數(shù)據(jù)分析場景服務(wù),根據(jù)某銀行應(yīng)用需求提供不少于 5個建模場景要求的數(shù)據(jù)支持和不少于 5 個應(yīng)用場景的功能支持開展數(shù)據(jù)自主分析、開發(fā)報表和管理駕駛艙等。

(免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )