導語:
隨著越來越多的企業(yè)認識到數(shù)據(jù)作為生產(chǎn)要素的價值,加快了企業(yè)數(shù)字化轉型,把完善企業(yè)級的數(shù)據(jù)治理體系作為企業(yè)數(shù)字化轉型的一個目標。長亮科技在大數(shù)據(jù)領域始終保持足夠的技術敏銳度,并積累了豐富的經(jīng)驗與資產(chǎn)。為此,我們組織了一個系列專文,分期發(fā)表,與您一起探索更適合當下行業(yè)發(fā)展的數(shù)據(jù)觀,歡迎大家持續(xù)關注。
作者|長亮科技大數(shù)據(jù)研究院
內(nèi)容|本篇共4013字,預計閱讀時間15分鐘
許多企業(yè)積累了海量數(shù)據(jù),在支持日常業(yè)務運營與管理中發(fā)揮了作用。但數(shù)據(jù)資產(chǎn)快速膨脹,導致存儲和計算資源以及維護成本急劇增加,管理者感受到了壓力,漸漸意識到數(shù)據(jù)資產(chǎn)的擴張是盲目無序的,認識到消耗了大量資源加工的很多數(shù)據(jù)資產(chǎn)是不可靠的,存在大量冗余與僵尸數(shù)據(jù),沒有任何使用價值的資產(chǎn)應該被核銷做減值處理。
一些銀行盤點了數(shù)百套業(yè)務系統(tǒng),數(shù)百萬數(shù)據(jù)項,形成了包含數(shù)十萬數(shù)據(jù)項的數(shù)據(jù)字典,企業(yè)級數(shù)據(jù)模型包含了數(shù)萬數(shù)據(jù)項,作為歷年來業(yè)務與數(shù)據(jù)系統(tǒng)建設的成績。清醒的專業(yè)人員可能會認識到如此龐大的數(shù)據(jù)字典不便使用,難以發(fā)揮價值,正是過去數(shù)據(jù)管理工作中的問題產(chǎn)生了如此龐大的、難以管理的數(shù)據(jù)字典與數(shù)據(jù)資產(chǎn)。
DAMA-DMBOK2.0數(shù)據(jù)管理的定義是:在數(shù)據(jù)和信息資產(chǎn)生命周期內(nèi),對交付、控制、保護和提高數(shù)據(jù)和信息資產(chǎn)的價值的規(guī)劃、政策、項目和實踐的開發(fā)、執(zhí)行和監(jiān)督。DAMA認為數(shù)據(jù)管理與信息管理、企業(yè)信息管理、企業(yè)數(shù)據(jù)管理、數(shù)據(jù)資源管理、信息資源管理、信息資產(chǎn)管理是同義詞。傳統(tǒng)數(shù)據(jù)管理以數(shù)據(jù)為中心,專注于技術數(shù)據(jù)管理,以便數(shù)據(jù)能夠更好地支持業(yè)務,現(xiàn)在環(huán)境下,外延已大大擴展。
數(shù)據(jù)問題是業(yè)務問題的癥狀表現(xiàn),數(shù)據(jù)資產(chǎn)管理能達到的目標由所處的生態(tài)系統(tǒng)條件決定,數(shù)據(jù)質量的狀況往往比大多數(shù)管理者意識到的要糟糕得多。數(shù)據(jù)資產(chǎn)的特征決定了其管理更復雜,企業(yè)需要主動將數(shù)據(jù)作為資產(chǎn)進行專業(yè)化、精細化、精準化管理,并持續(xù)監(jiān)控,從中獲得持續(xù)的價值。
01
與管理其他類型資產(chǎn)(如庫存、信貸資產(chǎn)、現(xiàn)金和設備等)一樣,需要建立通用的數(shù)據(jù)資產(chǎn)管理原則,以安全、一致和有效的方式管理數(shù)據(jù),確保實現(xiàn)數(shù)據(jù)管理的目標,包括:了解并支持企業(yè)及其利益相關者(包括客戶、員工和業(yè)務合作伙伴)的信息需求,獲取、存儲、保護并確保數(shù)據(jù)資產(chǎn)的完整性,確保數(shù)據(jù)和信息的質量。
對所有數(shù)據(jù)實行全生命周期管理。不僅要管理既有數(shù)據(jù),還要管理未來產(chǎn)生的數(shù)據(jù),不能重復過去先污染后治理的老路,從數(shù)據(jù)的產(chǎn)生源頭開始管理,在數(shù)據(jù)的需求與設計階段盡早介入,及時發(fā)現(xiàn)問題,把問題消滅在萌芽狀態(tài),避免問題的產(chǎn)生與發(fā)散,降低風險,減少未來的預期糾錯費用。通過治理優(yōu)化,降低數(shù)據(jù)資產(chǎn)管理運營的短期成本,同時著眼于長期投資回報。
管理數(shù)據(jù)資產(chǎn)的內(nèi)在質量屬性。信貸資產(chǎn)等傳統(tǒng)資產(chǎn)的質量管理有成熟通行的標準(如風險等級)、方法與管理考核制度,數(shù)據(jù)資產(chǎn)的質量內(nèi)涵要復雜得多,雖有成熟的評價與管理方法、流程,但沒有得到系統(tǒng)的執(zhí)行與監(jiān)控,沒有形成解決根本原因的閉環(huán)。應集成與整合散落的各種數(shù)據(jù),提升數(shù)據(jù)內(nèi)在固有價值,確保為用戶提供可靠、準確和最新的高質量數(shù)據(jù)資產(chǎn),同時要防止錯誤數(shù)據(jù)整合與加工產(chǎn)生不良資產(chǎn),減少可能造成的影響。
管理數(shù)據(jù)資產(chǎn)相關的風險。銀行風險部門管理財務資產(chǎn)的質量,數(shù)據(jù)資產(chǎn)的質量與風險是兩個維度。低質量數(shù)據(jù)代表風險,數(shù)據(jù)風險還包括數(shù)據(jù)丟失、被盜、誤解、誤用、濫用等。企業(yè)應識別和分類敏感數(shù)據(jù)資產(chǎn),定位敏感數(shù)據(jù),評估外部威脅和內(nèi)部風險,采取主動風險預防與緩解措施,防止未經(jīng)授權或不當訪問、操縱或使用數(shù)據(jù)資產(chǎn),避免監(jiān)管合規(guī)的風險和處罰,防止因資產(chǎn)市場化變現(xiàn)可能產(chǎn)生的風險。
數(shù)據(jù)只有被使用才會發(fā)揮價值。在財務方面衡量資金使用效率的主要指標是周轉率,有形資產(chǎn)的價值通常會隨著使用的增加而下降或貶值折舊。數(shù)據(jù)的價值隨著使用的增加而遞增,應挖掘數(shù)據(jù)資產(chǎn)的用途,使其價值最大化。數(shù)據(jù)如果沒有被使用,預期的費用持續(xù)存在(管理維護需要投入),沉沒成本在增加。
數(shù)據(jù)資產(chǎn)管理需要跨職能專業(yè)知識與技能。數(shù)據(jù)資產(chǎn)管理是專業(yè)人力資源密集型工作,數(shù)據(jù)在企業(yè)內(nèi)甚至企業(yè)間流動,數(shù)據(jù)的創(chuàng)建和使用方式以及數(shù)據(jù)使用者都在發(fā)展與變化中,有效管理數(shù)據(jù)資產(chǎn)涉及一系列復雜的過程,需要跨部門(業(yè)務部門、科技部門、數(shù)據(jù)部門等)、跨企業(yè)協(xié)作,需要廣泛的跨崗位職能的一系列專業(yè)知識和技能。數(shù)據(jù)密集型企業(yè),應該全員參與數(shù)據(jù)資產(chǎn)管理,除了承擔領導責任的管理人員應具備基本的數(shù)據(jù)素養(yǎng)外,每個數(shù)據(jù)管理干系人應具備必要的專業(yè)技能,從企業(yè)全局多視角出發(fā),實現(xiàn)對企業(yè)數(shù)據(jù)資產(chǎn)管理的承諾。
02
歷史上各種遺留系統(tǒng)的技術復雜性和管理不善造成了混亂,數(shù)據(jù)量太大以及數(shù)據(jù)復雜性,迫使管理者必須首先關注最重要的問題。不同數(shù)據(jù)資產(chǎn)并不同等重要,存在不同用途、質量與價值差異,管理要求不一樣,價值提升方法也不一樣。管理數(shù)據(jù)資產(chǎn)首先從對所管理的對象進行分類開始,精細化管理數(shù)據(jù)資產(chǎn),許多數(shù)據(jù)管理工具大都集中在分類和控制方面。
從邏輯上把數(shù)據(jù)分為主數(shù)據(jù)、參考數(shù)據(jù)、交易數(shù)據(jù)以及衍生匯總數(shù)據(jù)。主數(shù)據(jù)與參考數(shù)據(jù)通常是構成業(yè)務數(shù)據(jù)的基礎,主數(shù)據(jù)包括跨業(yè)務領域、流程和系統(tǒng)穿透企業(yè)各類數(shù)據(jù)的公共主數(shù)據(jù)以及業(yè)務領域主數(shù)據(jù),要確保主數(shù)據(jù)每個實例只有唯一的識別編號。不良的架構以及業(yè)務系統(tǒng)設計常常埋下許多陷阱,導致系統(tǒng)之間的數(shù)據(jù)結構和數(shù)據(jù)值不一致,他們甚至可能為現(xiàn)實中的實體制造不同的概念,給識別主數(shù)據(jù)及其之間關系帶來困難,許多企業(yè)維護了多套客戶、機構、員工、產(chǎn)品主數(shù)據(jù),增加了成本和風險。
數(shù)據(jù)還分為結構化數(shù)據(jù)與非結構化數(shù)據(jù),一般來說,傳統(tǒng)結構化數(shù)據(jù)的價值密度遠比非結構化數(shù)據(jù)高,沒有上下文背景的日志類數(shù)據(jù)以及非結構化數(shù)據(jù)的價值來源于能否與企業(yè)現(xiàn)有的主數(shù)據(jù)建立關系,許多企業(yè)尚沒有對結構化數(shù)據(jù)進行有效管理,如果追求熱點投入大量資源于非結構化數(shù)據(jù),試圖從中挖掘出價值,往往得不償失。
客戶數(shù)據(jù)是核心戰(zhàn)略資產(chǎn)。客戶數(shù)據(jù)是企業(yè)敏感數(shù)據(jù)資產(chǎn),在確保客戶數(shù)據(jù)的隱私性和機密性前提下,可以用于直接(被法律允許的交易或收購兼并)或間接(對客戶屬性數(shù)據(jù)與行為數(shù)據(jù)加工,結合其他公開的或專有的數(shù)據(jù),創(chuàng)建新的數(shù)據(jù)產(chǎn)品或服務以銷售)產(chǎn)生貨幣價值。低質量的客戶信息影響業(yè)務運營,增加了數(shù)據(jù)使用的成本與風險。企業(yè)應建立客戶統(tǒng)一視圖,向客戶提供個性化的產(chǎn)品或服務來提升戰(zhàn)略資產(chǎn)價值。
企業(yè)不同業(yè)務系統(tǒng)的重要性以及質量差異懸殊。銀行信貸系統(tǒng)、核心系統(tǒng)、信用卡系統(tǒng)、ECIF系統(tǒng)中都有客戶信息,信貸系統(tǒng)中的客戶數(shù)據(jù)比核心系統(tǒng)在某些屬性值方面更完整、更新鮮。信貸系統(tǒng)貸款借據(jù)的質量遠比核心貸款賬戶差,如果業(yè)務需求基于信貸借據(jù)統(tǒng)計分析余額、利息、費用,顯然是選擇了錯誤的數(shù)據(jù)源。一般來說關鍵的應用系統(tǒng),數(shù)據(jù)質量相對更高。應及早識別關鍵應用、關鍵數(shù)據(jù),梳理出權威數(shù)據(jù)的分布,推動使用權威數(shù)據(jù)資產(chǎn),阻止不良數(shù)據(jù)資產(chǎn)的使用以及影響的蔓延。
企業(yè)不應該投入均等的資源于不同的數(shù)據(jù)資產(chǎn)上,需要對企業(yè)數(shù)據(jù)進行價值分類,分配估值,關注重要數(shù)據(jù),提升產(chǎn)出投入比,精細化管理。
03
數(shù)據(jù)資產(chǎn)管理強調把數(shù)據(jù)當作資產(chǎn)來管理,使企業(yè)能夠從數(shù)據(jù)資產(chǎn)中獲取價值,就像對財務和實物資產(chǎn)的有效管理使企業(yè)能夠從這些資產(chǎn)中獲取價值一樣。數(shù)據(jù)資產(chǎn)是有助于生產(chǎn)未來現(xiàn)金流入或減少未來現(xiàn)金流出的經(jīng)濟資源,增加收益的方法,除了開源外,還有節(jié)流,精準的數(shù)據(jù)資產(chǎn)管理活動可以減少未來大量預期費用支出。數(shù)據(jù)相關的成本與具體企業(yè)相關,每個企業(yè)的數(shù)據(jù)都是其自身唯一的,不同企業(yè)的人力資源成本、設備成本、軟件成本等,沒有一個統(tǒng)一的衡量標準,可以根據(jù)企業(yè)自身的歷史數(shù)據(jù)與現(xiàn)狀做客觀的粗略評估,對數(shù)據(jù)管理活動的評估從建立企業(yè)內(nèi)部一致的常規(guī)成本和收益類別開始。
數(shù)據(jù)生命周期相關的成本包括:
l 數(shù)據(jù)從方案規(guī)劃、需求分析、設計開發(fā)、創(chuàng)建、采集、存儲、處理、使用、維護、歸檔等全生命周期成本;
l 數(shù)據(jù)質量問題造成的不良影響及修正、改進成本,失去的業(yè)務機會等;
l 風險防范的成本包括丟失數(shù)據(jù)時替換或重建數(shù)據(jù)的成本,敏感數(shù)據(jù)泄密等對企業(yè)的影響(包括商譽、社會影響等),提升系統(tǒng)可靠性,加強信息安全與隱私防范的成本等。
與之相對應,對數(shù)據(jù)與數(shù)據(jù)活動進行有效管理,得到的收益包括:
l 因數(shù)據(jù)架構、應用架構和技術架構等優(yōu)化帶來的準確性、一致性、時效性等提升的收益,滿足更多的需求、支持數(shù)據(jù)創(chuàng)新使用的預期價值,以及系統(tǒng)、設備、人員、管理等投入成本的減少;
l 高數(shù)據(jù)質量帶來的收益,不但更可靠、更廣泛的支持業(yè)務應用,提升了數(shù)據(jù)內(nèi)在價值,使數(shù)據(jù)資產(chǎn)出售有了可能,而且減少了垃圾數(shù)據(jù)的存儲與管理等成本;
l 因監(jiān)管合規(guī)等風險降低帶來的收益,如減少了監(jiān)管部門的罰款,增加了社會信任等。
因管理與優(yōu)化帶來的成本減少可以與優(yōu)化之前的成本比較,雖然因優(yōu)化工作會階段性增加成本,但是減少未來投入而獲得的收益是長期的。
04
數(shù)據(jù)資產(chǎn)管理是將數(shù)據(jù)作為有價值的業(yè)務資產(chǎn)進行管理、組織和優(yōu)化的過程,數(shù)據(jù)管理專業(yè)人員應了解自己工作的財務含義,衡量數(shù)據(jù)和數(shù)據(jù)管理活動的貨幣化價值,并一致地嵌入應用到日常數(shù)據(jù)管理中。雖然數(shù)據(jù)設計、生產(chǎn)人員沒有生產(chǎn)垃圾數(shù)據(jù)的主觀意圖,但他們應該認識到數(shù)據(jù)管理生命周期中的每一步工作都涉及成本,或多或少影響資產(chǎn)負債表,可能因為自己的技能缺陷或粗心產(chǎn)生的數(shù)據(jù)質量差,不能滿足業(yè)務需求,沒有相應的價值產(chǎn)出,不能轉換為數(shù)據(jù)產(chǎn)品的資產(chǎn)價值,需要繼續(xù)更多的投入來糾錯,這些投入都被轉換為沉沒成本。如,我們常見到某些業(yè)務系統(tǒng)設計缺乏對業(yè)務主鍵的管理,設計師甚至沒有業(yè)務主鍵概念,也就是說沒有業(yè)務邏輯設計,產(chǎn)生了大量數(shù)據(jù)質量問題,導致下游加工、維護成本指數(shù)級增長,解決問題的時間越晚,沉沒成本越高。
熱力學第二定律告訴我們,不可能把熱量從低溫物體傳遞到高溫物體而不產(chǎn)生其他影響,所有封閉系統(tǒng)從一定的價值與結構開始,最終都不可挽回趨向混亂度最大的狀態(tài),除非外部注入能量。數(shù)據(jù)管理也是如此,如果置之不理,它會不斷惡化到無序狀態(tài),直到推倒重建。數(shù)據(jù)資產(chǎn)管理是一項沒有終點的工作,企業(yè)應該以最具成本效益的方式(包括所有成本、風險和性能屬性)開發(fā)、運營、維護、升級和處置資產(chǎn),需要持續(xù)注入能量,持久化管理數(shù)據(jù)資產(chǎn),持續(xù)監(jiān)控執(zhí)行情況,帶來整體資產(chǎn)價值的長期提升。