大數據“復活”記
1188
2025-03-31
數據資產管理
隨著企業數據越來越大,企業意識到數據是一種無形的資產,通過對企業各業務線產生的海量數據進行合理管理和有效應用,能盤活并充分釋放數據的巨大價值。如果不能對海量數據進行有效管理和應用,企業堆積如山的數據給企業帶來的是高昂的成本,數據就用不起來,也用不好。
通過數據資產管理可以保證數據的全生命周期高質量的能力,還可以為各類角色用戶提供數據資產的直觀視圖,方便用戶查看和使用數據資產,構建數據資產管理的最終目的是為了提升數據價值,使數據持續賦能業務。
數據資產管理和傳統的數據治理實際上區別不大,包含了所有數據治理內容,同時還有數據價值管理和數據共享管理內容,可以認為數據資產管理就是數據治理的升級版,是數據治理2.0版本。
數據資產管理的內容主要包括:數據標準管理、元數據管理、主數據管理、數據質量管理、數據安全管理、數據交換管理(數據共享管理)、數據生命周期管理七個方面。
一、數據標準管理
數據標準(Data Standards)是進行數據標準化的主要依據,構建一套完整的數據標準體系是開展數據標準管理工作的良好基礎,有利于打通數據底層的互通性,提升數據的可用性。用通俗的話講數據標準就是在組織內定義一套關于數據的規范,好讓我們都能理解這些數據的含義。例如:對于銀行系統中的客戶,核心系統人員認為在銀行開戶存錢的人就是客戶,信貸系統人員認為在銀行中貸款的人就是客戶,理財系統的人認為理財的人就是客戶等。
以上如果沒有統一標準的話,不僅增加溝通成本,而且項目實施、交付、信息共享、數據集成、協同工作往往會出現各種問題,而數據標準管理就是將這一套數據標準,通過各種管理活動,推動數據進行標準化的一個過程,是數據標準落地必不可少的過程。數據標準管理包括標準定義、標準查詢、標準發布。
二、 元數據管理
元數據(Meta-data)是描述數據的數據。例如一個文本數據的大小,位置,創建人,創建日期等,這些數據就是該文本文件的元數據。元數據又分為業務元數據、技術元數據、操作元數據、管理元數據。
業務元數據:與業務規則、流程相關的描述性數據。例如:人員信息數據中的統計時間、統計周期、統計區域范圍等。
技術元數據:與存儲、訪問等技術底層相關描述性數據。例如:人員信息數據存儲在的位置、訪問的URL地址,數據存儲庫,對應的表名,字段有哪些等。
操作元數據:與數據操作相關的描述性數據。例如:人員信息數據上傳人,上傳時間,修改時間等。
管理元數據:與數據管理相關的描述性數據。例如:人員信息數據訪問權限,安全等級,質量等級,過期時間等。
元數據就是為了準確的描述我們擁有的所有數據。其核心的目的是降低人與數據之間的溝通成本。描述的越準確,我們使用數據的成本就越低。元數據管理主要包括元數據采集、血緣分析、影響分析等。
三、主數據管理
主數據(Master Data)就是關于業務實體的數據。主數據是關鍵業務實體的最權威、最準確、價值最大的數據,用于建立交易閉環。例如對于銀行來說,用戶賬號、貸款賬號信息、理財產品等就是主數據;對于電商網站,用戶、商品就是主數據等。
由于IT系統建設的歷史局限性,主數據分布在不同的應用系統,而不同的應用系統之間主數據的定義、屬性、編碼存在眾多不一致,極大影響了系統和數據之間的融合與集成,因此需要進行主數據管理建設,統一規范企業級主數據。
主數據管理主要是對企業經營活動中所涉及的各類主數據制定統一數據標準和規范,如數據編碼標準、主數據接口標準等,方便開發人員使用,統一企業各類數據。
四、 數據質量管理
數據質量就是確保組織擁有的數據完整且準確,只有完整、準確的數據才可以供企業分析、共享使用,隨著公司數據的來源、形式越來越多,數據質量的戰略價值也急劇上升。例如:檢查某業務數據唯一性、完整性、數據流程轉換過程一致性、數據真實性等。數據質量管理包括質量規則定義、質量檢查、質量報告等。
五、數據安全管理
企業有些數據非常重要且敏感,這些數據大部分集中在應用系統中,例如銀行系統中客戶的聯絡信息、資產信息等,如果不慎泄露,不僅給客戶帶來損失,也會給銀行帶來不利的聲譽影響,因此數據安全在數據管理和治理過程中是相當重要的。數據安全管理包括數據權限管理、數據脫敏、數據加密等。
六、 數據共享管理
數據共享管理就是數據交換管理,企業中隨著時間和業務增長建立了眾多的信息系統,但是隨著信息系統的增加,各自孤立工作的信息系統將會造成大量的冗余數據和業務人員的重復勞動。例如數據倉庫DM層分析人員信息中缺失數據,可以通過數據交換系統反哺到業務系統中,避免重復勞動。企業急需通過建立底層數據集成平臺來聯系橫貫整個企業的異構系統、應用、數據源等,完成在企業內部的ERP、CRM、SCM、數據庫、數據倉庫,以及其它重要的內部系統之間無縫的共享和交換數據,避免“數據孤島”問題。
七、數據生命周期管理
任何事物都具有一定的生命周期,數據也不例外。從數據的產生、加工、使用乃至消亡都應該有一個科學的管理辦法,將極少或者不再使用的數據從系統中剝離出來,并通過核實的存儲設備進行保留,不僅能夠提高系統的運行效率,更好的服務客戶,還能大幅度減少因為數據長期保存帶來的儲存成本。
數據生命周期一般包含在線階段、歸檔階段(有時還會進一步劃分為在線歸檔階段和離線歸檔階段,即離線數倉和實時數倉構建,將數據存入數倉)、銷毀階段三大階段,數據生命周期管理內容包括建立合理的數據類別,針對不同類別的數據制定各個階段的保留時間、存儲介質、清理規則和方式、注意事項等。
企業主機安全 數據管理服務 DAS
版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。
版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。