前言
數(shù)據(jù)目錄是整個數(shù)據(jù)資產(chǎn)體系中的首要工作,是構(gòu)建企業(yè)數(shù)據(jù)架構(gòu)體系的基礎(chǔ)工作??尚纬善髽I(yè)統(tǒng)一的數(shù)據(jù)資產(chǎn)目錄,并為各業(yè)務(wù)域提供數(shù)據(jù)資產(chǎn)全景圖。
?
通過建設(shè)數(shù)據(jù)目錄,對元數(shù)據(jù)進行管理和應(yīng)用,可以支持組織未來的取數(shù)用數(shù)、與數(shù)據(jù)標準對標、數(shù)據(jù)質(zhì)量追溯等多種需求。
?
本文重點介紹四類數(shù)據(jù)目錄概念和內(nèi)容、以及與三清單的關(guān)系,同時介紹了數(shù)據(jù)目錄搭建的方法和流程及整理三清方法及策略。
1、數(shù)據(jù)資產(chǎn)管理困難與挑戰(zhàn)
規(guī)劃做了很多,資產(chǎn)盤點了不少,制度與辦法下發(fā)了不少,但是在落地過程中依然困難重重,難見效果。
?
(1)數(shù)據(jù)資產(chǎn)實際情況
?
數(shù)據(jù)資產(chǎn)盤點消耗大,時間長,無路徑。
?
盤點成果與業(yè)務(wù)脫節(jié),應(yīng)用效果差。
?
無從掌握核心資產(chǎn)。
?
(2)數(shù)據(jù)架構(gòu)
?
控制了數(shù)據(jù)流向圖,但不能動態(tài)掌握數(shù)據(jù)分布、流向的變化情況。
?
不清楚實際運行的數(shù)據(jù)模型與業(yè)務(wù)模型、企業(yè)架構(gòu)的匹配程度。
?
(3)元數(shù)據(jù)面臨七大挑戰(zhàn)和三大管理難點
?
元數(shù)據(jù)的七大挑戰(zhàn)
?
組織有許多數(shù)據(jù)源,但數(shù)據(jù)使用者沒有簡單的方法在一個地方準確識別這些數(shù)據(jù)源。
?
"全業(yè)務(wù)統(tǒng)一"數(shù)據(jù)中心已經(jīng)變成了一片數(shù)據(jù)沼澤,很難找到有意義的、可信賴的數(shù)據(jù)。
?
數(shù)據(jù)使用者沒有適當?shù)牧鞒虂碚埱笏麄冃枰臄?shù)據(jù)。
?
即使數(shù)據(jù)使用者可以訪問數(shù)據(jù),他們也不知道數(shù)據(jù)意味著什么或者應(yīng)該如何使用數(shù)據(jù)。
?
數(shù)據(jù)使用者不知道他們找到的數(shù)據(jù)的來源,因此無法確認數(shù)據(jù)的可信度。
?
數(shù)據(jù)消費者不知道誰擁有數(shù)據(jù),因此無法聯(lián)系相應(yīng)的負責(zé)人。
?
數(shù)據(jù)消費者不知道企業(yè)中已經(jīng)存在哪些數(shù)據(jù)集,也不知道誰使用了類似的數(shù)據(jù)探索過類似的問題。
?
對于上述問題的解決,數(shù)據(jù)治理專家可能會想到元數(shù)據(jù)。元數(shù)據(jù)真的能夠完全解決這些問題嗎?答案是不能。
?
?
元數(shù)據(jù)三大管理難點
?
數(shù)據(jù)增長的速度超過了數(shù)據(jù)管理人數(shù),企業(yè)用戶現(xiàn)在面臨著更多更大的數(shù)據(jù)來源,因此存在元數(shù)據(jù)管理人員可用性的瓶頸。
?
定義不正確、信息不完整、元數(shù)據(jù)陳舊或無法找到所需信息,它需要更多的元數(shù)據(jù)來理解存儲在數(shù)據(jù)倉庫中的數(shù)據(jù)資產(chǎn)。
?
技術(shù)人員和業(yè)務(wù)人員的思維和“語言”存在差異,這使得業(yè)務(wù)用戶獲取數(shù)據(jù)變得更加復(fù)雜和困難。
?
(4)數(shù)據(jù)質(zhì)量
?
數(shù)據(jù)質(zhì)量問題長期存在,未找到切入點
?
(5)數(shù)據(jù)運營
?
需要建立數(shù)據(jù)資產(chǎn)的管理制度與機制體系
?
有數(shù)據(jù)資產(chǎn)目錄的基礎(chǔ),但數(shù)據(jù)資產(chǎn)如何發(fā)揮更大的價值,并進行合理運營?
?
2、數(shù)據(jù)目錄定義、作用及應(yīng)用場景
2.1數(shù)據(jù)目錄相關(guān)概念及四種目錄類型
(1)數(shù)據(jù)目錄
?
數(shù)據(jù)目錄是以核心元數(shù)據(jù)為主要描述方式,按照資源分類索引和目錄條目格式要求,對數(shù)據(jù)庫中不同類型、不同層次的數(shù)據(jù)按照一定的分類體系進行編目,用以描述數(shù)據(jù)的特征,實現(xiàn)數(shù)據(jù)檢索、定位與獲取功能的目錄。
?
數(shù)據(jù)目錄概念的前身是數(shù)據(jù)字典和元數(shù)據(jù)存儲庫。數(shù)據(jù)字典通常用來收集、存儲和管理數(shù)據(jù)元素、數(shù)據(jù)格式、數(shù)據(jù)類型、數(shù)據(jù)長度以及與其他數(shù)據(jù)的關(guān)系等信息。元數(shù)據(jù)存儲庫則拓展了數(shù)據(jù)字典的概念,不僅包含數(shù)據(jù)格式類型信息,而是包括業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)、管理元數(shù)據(jù)等多種元數(shù)據(jù)描述。
?
數(shù)據(jù)目錄可以分為數(shù)據(jù)資源目錄、數(shù)據(jù)共享和開放目錄、數(shù)據(jù)資產(chǎn)目錄和數(shù)據(jù)服務(wù)目錄
?
四種數(shù)據(jù)目錄之間關(guān)系圖
?
通過全面梳理現(xiàn)行業(yè)務(wù)系統(tǒng),按照“盤點數(shù)據(jù),厘清數(shù)據(jù)狀況”、“關(guān)聯(lián)業(yè)務(wù),構(gòu)建數(shù)據(jù)目錄”的工作思路,形成的從業(yè)務(wù)體系出發(fā)的數(shù)據(jù)資源目錄。切實解決數(shù)據(jù)描述不統(tǒng)一、顆粒度不一致等問題,支撐企業(yè)各業(yè)務(wù)部門、各單位快捷查詢和定位數(shù)據(jù),為數(shù)據(jù)資產(chǎn)共享流通、創(chuàng)造價值打下堅實基礎(chǔ)。
?
?
(2)數(shù)據(jù)資源目錄
?
數(shù)據(jù)資源目錄是依據(jù)規(guī)范的元數(shù)據(jù)描述數(shù)據(jù)資源,站在全局視角對所擁有的全部數(shù)據(jù)資源進行編目,以便對數(shù)據(jù)資源進行管理、識別、定位、發(fā)現(xiàn)、共享的一種分類組織方法,從而達到對數(shù)據(jù)的瀏覽、查詢、獲取等目的。
?
數(shù)據(jù)資源目錄的建立能夠準確瀏覽組織內(nèi)所記錄或擁有的線上、線下原始數(shù)據(jù)資源,如電子文檔索引、數(shù)據(jù)庫表、電子文件、電子表格、紙質(zhì)文檔等。數(shù)據(jù)資源目錄是實現(xiàn)組織內(nèi)部數(shù)據(jù)資產(chǎn)管理、業(yè)務(wù)協(xié)同、數(shù)據(jù)共享、數(shù)據(jù)服務(wù),組織外部數(shù)據(jù)開放、數(shù)據(jù)服務(wù)的基礎(chǔ)和依據(jù)。
?
數(shù)據(jù)資源目錄建設(shè)首先定義數(shù)據(jù)資源目錄元數(shù)據(jù)、目錄分類編碼等,制定元數(shù)據(jù)和目錄分類編碼標準規(guī)范,然后對組織內(nèi)部數(shù)據(jù)資源進行全面調(diào)查和盤點,依據(jù)事先約定好的元數(shù)據(jù)和分類標準梳理數(shù)據(jù)資源目錄。
?
(3)數(shù)據(jù)資產(chǎn)目錄
?
數(shù)據(jù)資產(chǎn)目錄建設(shè)是在數(shù)據(jù)資源目錄建設(shè)基礎(chǔ)上,識別對企業(yè)有業(yè)務(wù)價值、決策價值、應(yīng)用價值等經(jīng)濟、社會價值的數(shù)據(jù)資源目錄,對識別出的數(shù)據(jù)資源目錄中原始數(shù)據(jù)資源進行標準化處理、安全分類分級、數(shù)據(jù)質(zhì)量提升、數(shù)據(jù)認責(zé)等數(shù)據(jù)治理工作,按照一定的信息邏輯、業(yè)務(wù)邏輯建模,對識別出的數(shù)據(jù)資源目錄進行更新或重組,編制形成貼近業(yè)務(wù)、統(tǒng)一標準、具有經(jīng)濟或社會價值的數(shù)據(jù)資產(chǎn)目錄。
?
編制數(shù)據(jù)資產(chǎn)目錄可以給出業(yè)務(wù)場景和數(shù)據(jù)資源的關(guān)聯(lián)關(guān)系,降低理解系統(tǒng)數(shù)據(jù)的門檻。(中國政府為推動跨部門數(shù)據(jù)共享開放而重點布置各級政府和代替政府履行一定公共服務(wù)職能的企業(yè)開展的重要數(shù)據(jù)管理工作,國務(wù)院和發(fā)改委先后多次發(fā)文,并已出臺數(shù)據(jù)資產(chǎn)目錄管理的系列國標)。
?
數(shù)據(jù)資產(chǎn)目錄是企業(yè)數(shù)據(jù)資產(chǎn)的主分類,其中的資產(chǎn)不能同時歸屬于不同的目錄中,以保證資產(chǎn)在目錄中的唯一性。并且,數(shù)據(jù)資產(chǎn)目錄構(gòu)建的角度應(yīng)該是管理的角度,根據(jù)不同數(shù)據(jù)資產(chǎn)管理范圍的劃分,由不同的角色進行管理。
?
能源行業(yè)以為例數(shù)據(jù)資產(chǎn)目錄示意圖
?
(4)數(shù)據(jù)共享和開放目錄
?
?
數(shù)據(jù)共享是組織內(nèi)部因履行職責(zé)、開展相關(guān)業(yè)務(wù)需要使用內(nèi)部掌控數(shù)據(jù)的行為。其主要目的是通過打破組織內(nèi)部壁壘、消除數(shù)據(jù)孤島,實現(xiàn)提高數(shù)據(jù)供給能力、提高運營效率、降低組織運營成本。數(shù)據(jù)共享目錄即組織內(nèi)部使用的數(shù)據(jù)目錄。
?
數(shù)據(jù)開放是指組織按照統(tǒng)一的管理策略向組織外部有選擇提供組織所掌控數(shù)據(jù)的行為。數(shù)據(jù)開放是實現(xiàn)數(shù)據(jù)跨組織、跨行業(yè)流轉(zhuǎn)的重要前提,也是數(shù)據(jù)價值最大化的基礎(chǔ)。對于政府而言,數(shù)據(jù)開放主要是指公共數(shù)據(jù)資源開放,對于企業(yè)而言,數(shù)據(jù)開放主要是披露企業(yè)運行情況、推動政企數(shù)據(jù)融合等。數(shù)據(jù)開放目錄即組織提供給外部使用的數(shù)據(jù)目錄。
?
在數(shù)據(jù)資源目錄的基礎(chǔ)上,提取出帶有共享屬性和開放屬性的目錄,形成數(shù)據(jù)共享和開放目錄。數(shù)據(jù)共享目錄和數(shù)據(jù)開放目錄的主要區(qū)別在于數(shù)據(jù)屬性和應(yīng)用主體不同,目前數(shù)據(jù)共享和開放目錄在政務(wù)領(lǐng)域應(yīng)用相對廣泛。
?
(5)數(shù)據(jù)服務(wù)目錄
?
數(shù)據(jù)服務(wù)目錄是對數(shù)據(jù)服務(wù)依據(jù)規(guī)范的元數(shù)據(jù)描述,按照特定的業(yè)務(wù)場景進行排序和編碼的一組信息,用以描述各個數(shù)據(jù)服務(wù)的特征,以便于對數(shù)據(jù)服務(wù)的使用和管理。
?
數(shù)據(jù)服務(wù)目錄的建設(shè)是基于組織內(nèi)已梳理的數(shù)據(jù)資產(chǎn)目錄,以業(yè)務(wù)場景、應(yīng)用場景為切入,以業(yè)務(wù)需求、應(yīng)用需求為導(dǎo)向進行編制。主要分為兩類,一類是數(shù)據(jù)應(yīng)用服務(wù),包括指標報表、分析報告等可以直接使用的數(shù)據(jù)應(yīng)用;另一類是數(shù)據(jù)接口服務(wù),提供鑒權(quán)、加密、計量、標簽化等;
?
2.2數(shù)據(jù)目錄的作用
1、通過語義層解決業(yè)務(wù)人員“理解”的問題
?
創(chuàng)建數(shù)據(jù)資源之間的關(guān)聯(lián)以獲得對數(shù)據(jù)更全面的視角;利用語義實現(xiàn)更廣泛的對數(shù)據(jù)業(yè)務(wù)理解的一致性,避免理解的偏差。
?
2、 通過目錄服務(wù)解決業(yè)務(wù)人員“查找“的問題
?
目錄服務(wù)將有關(guān)現(xiàn)實世界中的事物(如人、企業(yè)、計算機等等)的信息存儲為具有描述性屬性的對象。人們可以使用該服務(wù)按名稱查找對象或者像使用黃頁一樣,可使用它們查找。數(shù)據(jù)資源目錄是對數(shù)據(jù)存儲對象的描述,讓人們能夠方便、快速的找到所需要的數(shù)據(jù)。
?
3、通過數(shù)據(jù)安全解決業(yè)務(wù)人員“權(quán)限”問題
?
數(shù)據(jù)資源目錄應(yīng)建立數(shù)據(jù)分級和數(shù)據(jù)共享負責(zé)人制度,需要結(jié)合企業(yè)的實際數(shù)據(jù)管理業(yè)務(wù)特性,建立起數(shù)據(jù)分級制度,明確數(shù)據(jù)權(quán)威負責(zé)部門、對應(yīng)的個體負責(zé)人等。明確數(shù)據(jù)的范圍邊界和使用方式,清理數(shù)據(jù)管理及共享開放的義務(wù)和權(quán)利。
?
2.3數(shù)據(jù)目錄的應(yīng)用場景
為數(shù)據(jù)平臺建設(shè)提供參考依據(jù)。
?
為數(shù)據(jù)標準管理提供輸入。
?
為跨部門數(shù)據(jù)共享提供數(shù)據(jù)目錄。
?
為其他系統(tǒng)數(shù)據(jù)共享提供數(shù)據(jù)服務(wù)。
?
3、何為三清單?
?
?
各數(shù)據(jù)管理和服務(wù)部門按照“一次采集、共享使用”原則開展數(shù)據(jù)共享的主要依據(jù)。用于反映對數(shù)據(jù)的真實供需關(guān)系。
?
數(shù)據(jù)在系統(tǒng)中交互傳輸會造成大量的數(shù)據(jù)冗余,降低網(wǎng)絡(luò)運行效率。數(shù)據(jù)經(jīng)交換后,在多節(jié)點同時存在,造成“一數(shù)多源”的情形。若數(shù)據(jù)流動缺乏監(jiān)管,隱私數(shù)據(jù)與惡意數(shù)據(jù)會對網(wǎng)絡(luò)的安全性造成破壞。復(fù)雜的流通結(jié)構(gòu)使數(shù)據(jù)難以溯源定位,無法做到數(shù)據(jù)定責(zé)。數(shù)據(jù)成為新的治理主體,其發(fā)展趨勢嚴重依賴于歷史數(shù)據(jù),難以在宏觀層面對未來加以把控。
?
三清單與數(shù)據(jù)目錄關(guān)系
?
建立業(yè)務(wù)應(yīng)用需求驅(qū)動的數(shù)據(jù)”三清單“,將打破數(shù)據(jù)壁壘、簡化數(shù)據(jù)使用流程,全面提升數(shù)據(jù)治理質(zhì)量和數(shù)據(jù)共享效率,確保數(shù)據(jù)安全可靠、使用規(guī)范、共享高效,為加快推進企業(yè)數(shù)字化轉(zhuǎn)型奠定良好基礎(chǔ)。
?
?
三清單滿足數(shù)據(jù)資產(chǎn)共享場景
?
3.1數(shù)據(jù)責(zé)任(認責(zé))清單
數(shù)據(jù)責(zé)任清單:供數(shù)部門明確本部門可以向其他部門共享的數(shù)據(jù)清單。數(shù)據(jù)資產(chǎn)清單是指對數(shù)據(jù)中有價值、可用于分析和應(yīng)用的數(shù)據(jù)進行梳理,形成的目錄體系。編制數(shù)據(jù)資產(chǎn)目錄可以給出業(yè)務(wù)場景和數(shù)據(jù)資源的關(guān)聯(lián)關(guān)系,對每一項數(shù)據(jù)資產(chǎn),明確數(shù)據(jù)資源責(zé)任人,即為數(shù)據(jù)責(zé)任清單,是提高數(shù)據(jù)質(zhì)量的基礎(chǔ),也是梳理數(shù)據(jù)需求清單和負面清單的基礎(chǔ)。
?
需求責(zé)任清單體現(xiàn)數(shù)據(jù)資產(chǎn)提供部門的歸屬,包括數(shù)據(jù)資產(chǎn)的業(yè)務(wù)權(quán)限方和IT技術(shù)支持方。
?
以清單形式提供《數(shù)據(jù)責(zé)任清單》,包括:資源名稱、數(shù)據(jù)詳情、關(guān)鍵內(nèi)容說明、責(zé)任部門、責(zé)任角色、監(jiān)督部門、監(jiān)督角色、認責(zé)流程、數(shù)據(jù)應(yīng)用部門、數(shù)據(jù)應(yīng)用系統(tǒng)、數(shù)據(jù)來源、數(shù)據(jù)獲取方式、數(shù)據(jù)更新頻率等
?
3.2數(shù)據(jù)共享需求清單
共享清單:用數(shù)部門需要其他部門予以共享的數(shù)據(jù)清單。解決數(shù)據(jù)整合共享工作依然存在融合共享不充分和應(yīng)用發(fā)展不平衡等問題,引入技術(shù)與服務(wù)相結(jié)合管理模式,賦能新技術(shù)的同時,通過數(shù)據(jù)服務(wù)常態(tài)化,打通數(shù)據(jù)應(yīng)用的最后一公里,提升數(shù)據(jù)消費和共享能力,消除部門之間的“數(shù)據(jù)孤島”和“數(shù)據(jù)鴻溝”,突破業(yè)務(wù)壁壘,重塑業(yè)務(wù)流程,依托數(shù)據(jù)整合共享促進業(yè)務(wù)協(xié)同,形成多部門間的業(yè)務(wù)聯(lián)動。
?
數(shù)據(jù)共享應(yīng)以業(yè)務(wù)應(yīng)用為驅(qū)動,將數(shù)據(jù)中心數(shù)據(jù)向各級單位開放共享,對已授權(quán)共享數(shù)據(jù)需要經(jīng)管理部門審核,對敏感、涉密數(shù)據(jù)進行處理后按需開放共享。對未授權(quán)共享數(shù)據(jù)應(yīng)有需求部門申請,經(jīng)數(shù)據(jù)管理部門和業(yè)務(wù)部門授權(quán)同意后進行統(tǒng)一受理并開放共享。
?
需求清單體現(xiàn)用戶部門的權(quán)利和義務(wù),列名用戶用數(shù)內(nèi)容、用數(shù)目的、用戶方式。
?
以清單形式提供《數(shù)據(jù)需求清單》,包括:明確數(shù)據(jù)資源名稱、提供方、信息項、更新周期、共享屬性和開發(fā)屬性等內(nèi)容、責(zé)任到職能部門,推動各部門數(shù)據(jù)共享、定期更新,全面提升數(shù)據(jù)治理質(zhì)量和數(shù)據(jù)共享效率。
?
3.3數(shù)據(jù)負面清單
負面清單:安全部門基于法律、法規(guī)、規(guī)章明確規(guī)定不能共享的數(shù)據(jù),列入共享負面清單。負面清單是指不能直接共享使用,需經(jīng)數(shù)據(jù)提供部門對數(shù)據(jù)用途、提供方式、脫敏要求進行審核后方可共享的數(shù)據(jù)清單。
?
數(shù)據(jù)共享負面清單有助于提高負面清單外的數(shù)據(jù)共享效率,簡化數(shù)據(jù)使用流程,提升數(shù)據(jù)流通效率有助于數(shù)據(jù)資源要素在服務(wù)公司?質(zhì)量發(fā)展等全?位發(fā)揮重要作?。
?
制定數(shù)據(jù)負面清單的依據(jù)
?
1、商業(yè)秘密和工作秘密。依據(jù)《中央企業(yè)商業(yè)秘密保護暫行規(guī)定》、《國家電網(wǎng)公司密級范圍的規(guī)定》中明確的涉及商業(yè)秘密和工作秘密的數(shù)據(jù),納入負面清單,包括密鑰密碼、境外投資、“三重一大”事項、重要會議、案件、輿情、巡視信息,領(lǐng)導(dǎo)行程、出訪信息、通訊錄等。
?
2.個人隱私信息?!吨腥A人民共和國網(wǎng)絡(luò)安全法》就個人隱私保護做出了具體規(guī)定,要求搜集個人隱私信息應(yīng)遵循“合法、正當、必要的原則”,“建立健全用戶信息保護制度”。根據(jù)此項要求,結(jié)合業(yè)務(wù)特性,將個人證件號碼、電話、家庭住址、銀行賬戶、獎懲信息等部分個人隱私信息納入負面清單范圍。
?
3.其它敏感事項。依據(jù)《中華人民共和國招標投標法》、《中華人民共和國招標投標法實施條例》、《審計項目電子數(shù)據(jù)保密管理辦法》、《審計機關(guān)審計檔案管理規(guī)定》等法律法規(guī),涉及評標過程、結(jié)果,投標標底,評標專家等信息,涉及審計事項、問題線索等相關(guān)數(shù)據(jù),納入負面清單。
?
共享負面清單體現(xiàn)數(shù)據(jù)安全管理部門的管理要求,以促進共享使用為原則,對信息安全有管控要求的數(shù)據(jù)予以限制。
?
以清單形式提供《數(shù)據(jù)負面清單》,包括:明確數(shù)據(jù)資源名稱、提供方、信息項、更新周期、共享屬性、負面表現(xiàn)形式、不共享原因、負面管理措施及方法等。
?
4、數(shù)據(jù)目錄搭建的方法及流程
4.1自頂向下與向下而上相結(jié)合方法開展數(shù)據(jù)資源目錄建設(shè)思路
自頂向下就是根據(jù)企業(yè)業(yè)務(wù)價值鏈及數(shù)據(jù)應(yīng)用場景厘清主題域之間的邏輯關(guān)系,然后不斷進行細分;再針對業(yè)務(wù)對象進行梳理,定義各個業(yè)務(wù)對象下的邏輯數(shù)據(jù)實體;最后盤點每個邏輯數(shù)據(jù)實體包含的屬性,包括屬性名稱、屬性定義、計量單位、值域范圍等內(nèi)容。
?
自下而上補充則是對企業(yè)所有的信息系統(tǒng)現(xiàn)狀調(diào)研,摸清有哪些數(shù)據(jù),存儲在哪些地方;再對信息系統(tǒng)數(shù)據(jù)進行統(tǒng)一采集和存儲;最后對采集的系統(tǒng)數(shù)據(jù)項進行盤點,包括字段名稱,類型、長度、約束等內(nèi)容
?
圖片
?
數(shù)據(jù)資源目錄建設(shè)方法
?
4.2數(shù)據(jù)資產(chǎn)目錄的建設(shè)方法論,大概分為5個步驟
(1)確定資產(chǎn)盤點范圍和系統(tǒng)
?
圍繞企業(yè)相關(guān)的業(yè)務(wù)主線涉及業(yè)務(wù)系統(tǒng),并結(jié)合企業(yè)已有資產(chǎn)內(nèi)容,明確盤點數(shù)據(jù)現(xiàn)狀、數(shù)據(jù)表范圍等信息。
?
根據(jù)數(shù)據(jù)資產(chǎn)盤點系統(tǒng)范圍,開展相關(guān)源系統(tǒng)現(xiàn)狀調(diào)研,源系統(tǒng)盤點范圍梳理、源端系統(tǒng)盤點范圍確認、數(shù)據(jù)盤點工作量評估、業(yè)務(wù)功能模塊梳理。
?
(2)數(shù)據(jù)資源盤點
?
結(jié)合企業(yè)現(xiàn)有業(yè)務(wù)、信息系統(tǒng)在運和數(shù)據(jù)平臺現(xiàn)有數(shù)據(jù)資產(chǎn)匯聚情況,深入調(diào)研各專業(yè)業(yè)務(wù)現(xiàn)狀及系統(tǒng)運行現(xiàn)狀,梳理各系統(tǒng)數(shù)據(jù)庫、表、字段等基礎(chǔ)信息,形成層次清晰、覆蓋全面的專業(yè)數(shù)據(jù)庫表目錄。
?
根據(jù)數(shù)據(jù)盤點工作范圍和源端系統(tǒng)收集情況,利用企業(yè)相關(guān)盤點工具開展數(shù)據(jù)關(guān)聯(lián)關(guān)系確認,對工具無法識別、未識別關(guān)聯(lián)關(guān)系的數(shù)據(jù)表進行線下梳理、增量完善分批次開展數(shù)據(jù)關(guān)聯(lián)關(guān)系梳理工作,然后完成數(shù)據(jù)資源盤點工具中的數(shù)據(jù)關(guān)聯(lián)關(guān)系。
?
然后根據(jù)業(yè)務(wù)模塊梳理成果,按照業(yè)務(wù)模塊與數(shù)據(jù)表的關(guān)聯(lián)關(guān)系開展梳理工作,形成業(yè)務(wù)關(guān)聯(lián)關(guān)系清單。
?
最后根據(jù)無效字段、數(shù)據(jù)關(guān)聯(lián)關(guān)系、業(yè)務(wù)關(guān)聯(lián)關(guān)系盤點結(jié)果,將最終盤點結(jié)果完善到數(shù)據(jù)資源盤點工具中。
?
在盤點過程中充分承接業(yè)務(wù)流程梳理成果,將業(yè)務(wù)流程中涉及的系統(tǒng)數(shù)據(jù)項與業(yè)務(wù)端輸入L1-L3做映射,交叉驗證,相互補充
?
?
數(shù)據(jù)資源目錄梳理時,將盤點好的數(shù)據(jù)資源匯總構(gòu)成數(shù)據(jù)資源目錄的同時,也要從數(shù)據(jù)資源內(nèi)容層面進行梳理,將數(shù)據(jù)資源依據(jù)業(yè)務(wù)進行分類匯總?cè)诤稀?/div>
?
(3)數(shù)據(jù)字典核查
?
利用企業(yè)現(xiàn)有數(shù)據(jù)資源盤點工具,對相關(guān)業(yè)務(wù)系統(tǒng)數(shù)據(jù)存在的表描述、字段描述缺失、字段描述有誤情況進行核查,然后反饋源業(yè)務(wù)系統(tǒng)廠商和數(shù)據(jù)中心管理人員對問題進行補充及完善。
?
(4)數(shù)據(jù)資源構(gòu)建
?
針對新建業(yè)務(wù)應(yīng)用和新建系統(tǒng)間數(shù)據(jù)需求,統(tǒng)一基于數(shù)據(jù)平臺的數(shù)據(jù)服務(wù)實現(xiàn),按照業(yè)務(wù)應(yīng)用、業(yè)務(wù)系統(tǒng)的數(shù)據(jù)獲取需求輔導(dǎo)數(shù)據(jù)管理人員構(gòu)建相關(guān)資產(chǎn)服務(wù),形成規(guī)范化的數(shù)據(jù)資產(chǎn)管理目錄。
?
(5)數(shù)據(jù)資產(chǎn)發(fā)布
?
輔助企業(yè)按照業(yè)務(wù)機制、數(shù)據(jù)類型等建立線上數(shù)據(jù)資源目錄審批及發(fā)布流程,支撐數(shù)據(jù)資源目錄的規(guī)范化管理和維護機制。
?
最終通過構(gòu)建統(tǒng)一數(shù)據(jù)目錄體系,加強數(shù)據(jù)目錄優(yōu)化和完善,切實解決數(shù)據(jù)描述不統(tǒng)一、顆粒度不一致等問題,支撐各業(yè)務(wù)部門、各單位快捷查詢和定位數(shù)據(jù),為后續(xù)制定數(shù)據(jù)標準、建立數(shù)據(jù)規(guī)范、開展數(shù)據(jù)治理、實現(xiàn)數(shù)據(jù)共享奠定基礎(chǔ)。
?
《數(shù)據(jù)資產(chǎn)目錄清單》,包括不限于:數(shù)據(jù)分類、數(shù)據(jù)細目、數(shù)據(jù)類型、更新頻率、具體說明、技術(shù)屬性、業(yè)務(wù)屬性、管控屬性等。
?
?
數(shù)據(jù)資產(chǎn)目錄模型示意圖
?
4.3數(shù)據(jù)資源目錄模板
數(shù)據(jù)資源目錄覆蓋業(yè)務(wù)、技術(shù)、管理、操作四類元數(shù)據(jù),30多個元數(shù)據(jù)元素,支撐數(shù)據(jù)資源目錄框架、數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量、數(shù)據(jù)模型、數(shù)據(jù)確權(quán)、數(shù)據(jù)安全、數(shù)據(jù)開放共享、數(shù)據(jù)運營維護等數(shù)據(jù)管理領(lǐng)域,全方位支撐數(shù)據(jù)治理與價值發(fā)揮。
?
?
數(shù)據(jù)資源目錄模板
?
5、整理三清單制定方法及策略
結(jié)合企業(yè)數(shù)據(jù)資產(chǎn)管理、質(zhì)量管理、供需管理情況與特點,促進數(shù)據(jù)資源整合和利用,推進公司內(nèi)外統(tǒng)一、高效的數(shù)據(jù)共享與分析服務(wù),滿足橫向跨專業(yè)間、縱向不同層級撿數(shù)據(jù)共享和融通需求,建立分領(lǐng)域跨部門的數(shù)據(jù)整合應(yīng)用機制,以數(shù)據(jù)資產(chǎn)活化、數(shù)據(jù)創(chuàng)新為原則,以數(shù)據(jù)資源目錄為共享基礎(chǔ),根據(jù)各系統(tǒng)各部門、各運維廠商數(shù)據(jù)管理職責(zé),完成《數(shù)據(jù)責(zé)任清單》、《數(shù)據(jù)需求清單》、《數(shù)據(jù)負面清單》的梳理,并對最終成果進行發(fā)布,從數(shù)據(jù)采集、存儲、整合、共享、應(yīng)用等全生命周期過程形成標準化責(zé)任體系,相互聯(lián)系、相互作用、相互約束、相互補充,從而構(gòu)成一個統(tǒng)一整體。
?
5.1數(shù)據(jù)資產(chǎn)認責(zé)管理
(1)認責(zé)工作內(nèi)容
?
數(shù)據(jù)資產(chǎn)治理體系的建立將為企業(yè)數(shù)據(jù)資產(chǎn)的準確性、一致性、完整性、實時性和安全性提供管理機制上的保障,數(shù)據(jù)認責(zé)是對企業(yè)范圍內(nèi)各相關(guān)方的數(shù)據(jù)管理職責(zé)進行分配,從而明確彼此間的工作邊界以及協(xié)作機制, 這是企業(yè)構(gòu)建穩(wěn)定而規(guī)范的數(shù)據(jù)治理體系的重要基礎(chǔ)。
?
數(shù)據(jù)認責(zé)建立與實施應(yīng)該遵循DCMM數(shù)據(jù)能力成熟度體系標準,圍繞業(yè)務(wù)數(shù)據(jù)的產(chǎn)生、流轉(zhuǎn)、應(yīng)用、歸檔全生命周期進行相關(guān)工作開展。
?
(2)數(shù)據(jù)認責(zé)機制
?
構(gòu)建數(shù)據(jù)認責(zé)機制框架通過“核對→錄入→審核”三個完整閉環(huán),建立數(shù)據(jù)錄入規(guī)范;按照“誰錄入、誰整改、誰負責(zé)”的原則,明確數(shù)據(jù)質(zhì)量責(zé)任主體及工作職責(zé),建立數(shù)據(jù)認責(zé)管理辦法及流程。
?
(3)數(shù)據(jù)認責(zé)范圍? ??
?
根據(jù)數(shù)據(jù)認責(zé)主題及工作職責(zé),明確認責(zé)數(shù)據(jù)范圍邊界,按照業(yè)務(wù)歸屬進行數(shù)據(jù)業(yè)務(wù)域及主題分類,并且對認責(zé)數(shù)據(jù)內(nèi)容進行優(yōu)先級排列。
?
(4)數(shù)據(jù)認責(zé)顆粒度
?
數(shù)據(jù)顆粒度需要結(jié)合行業(yè)或者業(yè)務(wù)的需求,對數(shù)據(jù)進行表級別或字段級別識別并且細化,從而明確數(shù)據(jù)顆粒度責(zé)任主體,形成認責(zé)清單,并通過數(shù)據(jù)的權(quán)責(zé)確認和標準化工作,明確數(shù)源和標準,確保一數(shù)一源,按需共享。
?
(5)數(shù)據(jù)認責(zé)角色
?
明確數(shù)據(jù)價值鏈的參與方與角色定位,包括不限于:數(shù)據(jù)使用者、數(shù)據(jù)所有者、數(shù)據(jù)提供者、數(shù)據(jù)管理員。
?
(6)數(shù)據(jù)認責(zé)職責(zé)
?
基于現(xiàn)有的業(yè)務(wù)和系統(tǒng)現(xiàn)狀,定義數(shù)據(jù)責(zé)任規(guī)范矩陣,明確數(shù)據(jù)價值鏈的參與方的職責(zé)分工。
?
5.2數(shù)據(jù)資產(chǎn)共享與負面管理
數(shù)據(jù)開放共享需遵循公司促進數(shù)據(jù)共享的總體思路,基于數(shù)據(jù)資源盤點成果,實現(xiàn)線上數(shù)據(jù)開放共享服務(wù),建立數(shù)據(jù)開放分級授權(quán)機制,明確各單位、各專業(yè)數(shù)據(jù)應(yīng)用需求,提供統(tǒng)一的數(shù)據(jù)服務(wù)及應(yīng)用工具支撐,全面提升企業(yè)數(shù)據(jù)共享融通及服務(wù)能力,充分發(fā)揮企業(yè)數(shù)據(jù)價值。
?
數(shù)據(jù)共享范圍梳理工作采用線下梳理的方式,由各業(yè)務(wù)部門根據(jù)梳理范圍,根據(jù)《國家網(wǎng)絡(luò)安全法》、《國家商業(yè)秘密管理辦法》及企業(yè)管理、涉密管理相關(guān)規(guī)定,全面理清涉密數(shù)據(jù),形成的《共享數(shù)據(jù)清單》、《數(shù)據(jù)負面清單》,結(jié)合數(shù)據(jù)資源目錄,建立數(shù)據(jù)分級授權(quán)機制,包括:確定數(shù)據(jù)共享梳理范圍、數(shù)據(jù)共享層級梳理、數(shù)據(jù)共享層級確認、數(shù)據(jù)共享成果物梳理、數(shù)據(jù)共享范圍發(fā)布。
?
結(jié)束語
推行“三清單一數(shù)據(jù)目錄”工作機制,企業(yè)根據(jù)各自職責(zé)明確需求清單、責(zé)任清單、負面清單,并通過“三清單”機制支撐供需管理,切實解決數(shù)據(jù)描述不統(tǒng)一、顆粒度不一致等問題,支撐企業(yè)各業(yè)務(wù)部門、各單位快捷查詢和定位數(shù)據(jù),推動各數(shù)據(jù)源單位主動歸集數(shù)據(jù),促進共享,并對數(shù)據(jù)資源實行統(tǒng)一目錄管理,實現(xiàn)內(nèi)部數(shù)據(jù)資產(chǎn)目錄統(tǒng)一檢索、快速定位和統(tǒng)計分析,實現(xiàn)數(shù)據(jù)資產(chǎn)地圖展示、逐步形成知識圖譜,為企業(yè)數(shù)據(jù)資產(chǎn)共享流通、創(chuàng)造價值打下堅實基礎(chǔ)。
推行“三清單一數(shù)據(jù)目錄”工作機制,企業(yè)根據(jù)各自職責(zé)明確需求清單、責(zé)任清單、負面清單,并通過“三清單”機制支撐供需管理,切實解決數(shù)據(jù)描述不統(tǒng)一、顆粒度不一致等問題,支撐企業(yè)各業(yè)務(wù)部門、各單位快捷查詢和定位數(shù)據(jù),推動各數(shù)據(jù)源單位主動歸集數(shù)據(jù),促進共享,并對數(shù)據(jù)資源實行統(tǒng)一目錄管理,實現(xiàn)內(nèi)部數(shù)據(jù)資產(chǎn)目錄統(tǒng)一檢索、快速定位和統(tǒng)計分析,實現(xiàn)數(shù)據(jù)資產(chǎn)地圖展示、逐步形成知識圖譜,為企業(yè)數(shù)據(jù)資產(chǎn)共享流通、創(chuàng)造價值打下堅實基礎(chǔ)。