【文章內容簡介】 而控制、保護、提高數據資產的價值。216。 數據安全：通過計劃、制定、執(zhí)行數據安全政策和安全策略措施，為企業(yè)級大數據平臺的數據和信息提供行之有效的認證、授權、訪問和審計。216。 數據運維在左側目錄里缺少一個模塊：包括數據資產運維、數據質量運維，借鑒互聯(lián)網思維，通過產品化運維工具來整體提升企業(yè)級大數據平臺數據運維效率。l 企業(yè)級省大數據平臺：216。 大數據基礎平臺，負責數據的接入、存儲、管理、應用及相關基礎功能支撐。. 系統(tǒng)模塊流程圖54數據治理系統(tǒng)功能各模塊關系圖 如圖54所示，數據治理系統(tǒng)各模塊之間，根據數據操作的流程產生相互關聯(lián)，各模塊業(yè)務流程關系說明如下：L1：數據標準管理模塊將標準定義映射到元數據信息上，實現數據標準的規(guī)范要求落地。L2：元數據管理模塊為數據資產管理模塊提供存儲模型、屬性信息查詢服務。L3：元數據管理模塊為數據質量管理模塊提供元數據相關屬性信息。L4：用戶通過元數據定義大數據平臺的數據結構。L5：數據質量管理模塊根據采集需求從大數據平臺采集數據。L6：數據質量管理模塊將數據質量問題反饋給大數據平臺。L7：數據質量管理模塊向資產模塊提交數據質量評估結果。L8：元數據管理模塊為數據安全管理模塊提供隱私級別定義服務。L9：數據資產管理模塊發(fā)起資產訪問申請，由數據安全管理模塊控制用戶訪問權限，控制數據資產的增加、刪除、變更操作權限，對訪問的數據內容、數據屬性等操作進行管控。L10：數據安全管理模塊為大數據平臺提供數據訪問權限策略。. 系統(tǒng)邊界企業(yè)級省大數據平臺數據治理子系統(tǒng)與其它子系統(tǒng)之間存在數據交互、功能調用、流程穿插等關聯(lián)。數據治理子系統(tǒng)與大數據平臺系統(tǒng)內其它子系統(tǒng)的關系示意如圖55所示：數據治理元數據管理數據標準管理數據質量管理數據資產管理數據安全管理數據服務平臺企業(yè)級省大數據平臺平臺運維圖55數據治理子系統(tǒng)與各子系統(tǒng)邊界圖. 與企業(yè)級省大數據平臺關系企業(yè)級省大數據平臺上的數據資產是數據治理的主要對象；數據治理為企業(yè)級省大數據平臺提供數據標準指導、元數據定義、數據質量監(jiān)控、數據安全等方面的全面支撐，使大數據平臺上的數據資產清晰、有序、安全、可控。. 與對外能力開放平臺關系數據治理為對外能力開放平臺提供元數據查詢、數據安全管理支持；對外能力開放平臺為數據治理提供統(tǒng)一的數據治理產品及功能注冊、發(fā)布、使用服務。. 與平臺運維系統(tǒng)關系數據治理子系統(tǒng)支撐大數據平臺的數據管控流程，并與平臺運維交互協(xié)調，共同支撐大數據平臺整體的安全運維、數據運維和管理運維。6. 數據治理核心模塊. 數據標準管理. 背景中國移動企業(yè)級省大數據平臺數據標準是在經營分析系統(tǒng)數據管控要求基礎之上，借鑒互聯(lián)網企業(yè)數據治理的經驗而提出的。數據標準是指在中國移動企業(yè)級省大數據平臺下，保障企業(yè)內外部使用和交換數據的一致性和準確性，具有行業(yè)特點且共同使用的一種規(guī)范性約束。數據標準是企業(yè)級省大數據平臺數據治理的基礎性工作，是數據治理建設中的首要環(huán)節(jié)。首先，數據標準為企業(yè)級省大數據平臺提供統(tǒng)一的數據標準定義和平臺邏輯模型。其次，數據標準是企業(yè)級省大數據平臺進行數據治理的依據和根本。再次，數據標準是衡量企業(yè)級省大數據平臺數據資產運營和管理的評估依據。最后，中國移動通過數據標準管理的實施，實現對企業(yè)級省大數據平臺全網數據的統(tǒng)一運營管理。企業(yè)級省大數據平臺數據治理體系中數據標準管理如圖61所示，包括制定數據標準的規(guī)范性文件、進行數據標準化管控及數據標準管理組織。圖61數據標準管理內容企業(yè)級省大數據平臺數據標準管理與原經營分析系統(tǒng)數據管控的區(qū)別如下表61所示：表61企業(yè)級省大數據平臺數據標準管理與原經營分析系統(tǒng)數據管控區(qū)別企業(yè)級省大數據平臺數據標準管理原經營分析系統(tǒng)數據管控數據范圍涉及企業(yè)內外部數據運營相關的數據，包含BOM三域數據、外部數據。數據僅限于市場經營活動的B域和部分O,M域數據。業(yè)務應用模式以數據標準為基礎的數據治理體系，實現數據的資產化，貫穿整個數據運營的全流程，形成以中國移動大數據平臺為核心的大數據生態(tài)圈，服務于企業(yè)內外部客戶。以支撐企業(yè)內部經營分析為主。服務對象服務于整個大數據生態(tài)圈。原經營分析系統(tǒng)使用人員。. 目標及原則 數據標準管理的總體目標：通過統(tǒng)一的數據標準制定和發(fā)布，結合制度約束、系統(tǒng)控制等手段，實現中國移動企業(yè)級省大數據平臺數據的完整性、有效性、一致性、規(guī)范性、開放性和共享性管理，提高企業(yè)級省大數據平臺數據治理水平。 數據標準制定的原則：l 開放性：標準制定人人參與。l 共享性：數據標準化信息在大數據生態(tài)圈共享使用。l 完整性：涵蓋客戶、產品、服務、帳務、資源、網絡等全部重要數據信息。l 有效性：信息準確度高、理解上不存在歧義。l 一致性：做到“五統(tǒng)一”,定義統(tǒng)一、口徑統(tǒng)一、名稱統(tǒng)一、來源統(tǒng)一、參照統(tǒng)一。l 規(guī)范性：制度規(guī)范、流程控制、系統(tǒng)管理等。. 業(yè)務分類和定義. 數據標準體系分類數據標準制定如圖62所示，包括數據標準體系劃分和數據標準內容制定，數據標準體系可分為基礎類數據標準和指標類數據標準。圖62數據標準體系劃分. 數據標準內容制定數據標準內容的制定按照數據標準體系分類的要求分別給出數據標準制定的規(guī)范要求。基礎類數據標準基礎類數據標準是通過各種業(yè)務處理產生或各類渠道采集的基礎性數據，在全國范圍內必須是唯一定義的，如“用戶品牌”、“歸屬地市”。基礎類數據標準分為行業(yè)參考模型實體標準和公共代碼標準。行業(yè)參考模型實體標準指按照行業(yè)需求和中國移動省級數據邏輯模型實體規(guī)范要求，繼承以往數據邏輯模型實體規(guī)范，將各域的邏輯模型實體定義抽象為模型實體標準要求。行業(yè)參考模型實體數據標準體系定義內容如表62所示。表62行業(yè)參考模型實體數據標準體系定義內容行業(yè)參考模型實體標準標準體系屬性說明數據標準編碼根據數據標準編碼命名規(guī)則進行編寫。標準主題數據標準歸屬主題標準子類數據標準歸屬類型中文名稱數據標準中文名稱。英文名稱數據標準英文名稱。實體編號根據行業(yè)參考模型實體編號命名規(guī)則進行編寫。實體名稱根據行業(yè)參考模型實體名稱命名規(guī)則進行編寫。數據版本該數據標準的版本信息。數據體系分類根據數據分類規(guī)則對數據進行分類，以保證數據體系的易用性，以及符合用戶查找習慣。重要級別集團規(guī)范定義的數據為一級，省公司定義的數據為二級，其它常用的數據為三級。數據提供部門該數據標準定義數據的提供部門。數據提供部門負責人該數據標準定義數據提供負責人。數據維護部門該數據標準定義數據維護部門。數據維護部門負責人該數據標準定義數據維護負責人。業(yè)務主管部門該數據標準定義數據業(yè)務主管部門，該部門對數據口徑、編碼取值和相關專業(yè)術語有決定權。業(yè)務主管部門負責人該數據標準定義數據業(yè)務負責人。數據來源系統(tǒng)如：BOSS,CRM,ERP等主要依據關于指標的解釋和描述文件。如集團規(guī)范、省公司規(guī)范、業(yè)務部門制定等等。業(yè)務定義指標的業(yè)務描述口徑，一般由業(yè)務部門使用業(yè)務語言制定。 具體行業(yè)參考模型實體數據標準體系定義內容示例參見《附錄二：數據標準體系定義內容示例》。公共代碼標準，指對于一些共享程度較高、內容相對比較穩(wěn)定的編碼，通?？梢越M織力量一次性地編制出來，其中有一些需要引用外部公共標準機構的標準，比如：世界各國和地區(qū)名稱代碼等。公共代碼標準體系定義內容如表63所示。表63公共代碼標準體系定義內容公共代碼標準標準體系屬性說明數據標準編碼根據數據標準編碼命名規(guī)則進行編寫。公共標準號引入外部公共標準號中文標準名稱數據標準中文名稱英文標準名稱數據標準英文名稱。標準狀態(tài)該標準的狀態(tài)，如現行、停止。公共標準機構名稱引入該公共標準的機構名稱。數據標準體系根據數據分類規(guī)則對數據進行分類，以保證數據體系的易用性，以及符合用戶查找習慣。重要級別集團規(guī)范定義的數據為一級，省公司定義的數據為二級，其它常用的數據為三級。數據標準引入部門該數據標準引入和維護部門。數據標準引入部門負責人該數據標準引入和數據維護負責人。數據上報系統(tǒng)最終對數據進行計算和發(fā)布的系統(tǒng)，也是各部門唯一獲取指標數據的來源系統(tǒng)。具體行業(yè)參考模型實體數據標準體系定義內容示例參見《附錄二：數據標準體系定義內容示例》。指標類數據標準指標類數據標準是數據基礎上按照一定業(yè)務規(guī)則加工匯總的數據，如KPI指標數據。指標類數據又可分為基礎指標和計算指標。基礎指標一般不含維度信息，且具有特定業(yè)務和經濟含義。計算指標通常由兩個以上基礎指標計算出。指標類數據標準體系定義內容如表64所示。表64指標類數據標準體系定義內容指標類標準說明基礎屬性數據標準編碼根據數據標準編碼命名規(guī)則進行編寫。中文名稱數據標準中文名稱。英文名稱數據標準英文名稱。應用場景該指標適用于什么場景。數據版本該數據標準的版本信息。數據體系分類根據數據分類規(guī)則對數據進行分類，以保證數據體系的易用性，以及符合用戶查找習慣。重要級別集團規(guī)范定義的數據為一級，省公司定義的數據為二級，其它常用的數據為三級。管理屬性數據提供部門該數據標準定義數據的提供部門。數據提供部門負責人該數據標準定義數據提供負責人。數據維護部門該數據標準定義數據維護部門。數據維護部門負責人該數據標準定義數據維護負責人。業(yè)務主管部門該數據標準定義數據業(yè)務主管部門，該部門對數據口徑、編碼取值和相關專業(yè)術語有決定權。業(yè)務主管部門負責人該數據標準定義數據業(yè)務負責人。數據上報系統(tǒng)最終對數據進行計算和發(fā)布的系統(tǒng)，也是各部門唯一獲取指標數據的來源系統(tǒng)。數據生成系統(tǒng)生成數據所需的數據所在的來源系統(tǒng)，如BOSS系統(tǒng)。數據上游系統(tǒng)數據生成后上報給哪個系統(tǒng)，如ERP系統(tǒng)。業(yè)務屬性主要依據關于指標的解釋和描述文件。如集團規(guī)范、省公司規(guī)范、業(yè)務部門制定等等。業(yè)務定義指標的業(yè)務描述口徑，一般由業(yè)務部門使用業(yè)務語言制定。計算流程/算法用來描述指標詳細的計算過程。指標類型根據管理需要可以將指標分為基礎指標、計算指標兩類。計算指標公式用于描述相關指標間的平衡關系，可用于指標數據審核過程中，能有效地保證指標數據質量。技術屬性計量單位數據使用單位如：“戶”、“分鐘”、“MB”、“元”、“次”、“%”等等。統(tǒng)計精度指標統(tǒng)計數值精確到小數還是整數。數據值域數據的合理取值范圍。統(tǒng)計周期數據統(tǒng)計周期如“日”、“周”、“月”、“季度”、“半年”、“年”等等。統(tǒng)計粒度數據統(tǒng)計粒度如：“用戶級”、“區(qū)縣級”、“地市級”等。統(tǒng)計維度數據統(tǒng)計維度如：“地域”、“品牌”、“在網時長”、“客戶等級”等。指標出數表指標數據來源于哪張物理表。指標出數代碼指標數據來源于物理表的哪個。 具體行業(yè)參考模型實體數據標準體系定義內容示例參見《附錄二：數據標準體系定義內容示例》。. 技術功能要求. 數據標準制定數據標準的制定按照本冊中數據標準管理的業(yè)務分類和定義規(guī)范指導要求，基于各企業(yè)級省大數據平臺的數據管控需求進行數據標準規(guī)范的制定。其制定的數據標準規(guī)范內容在全省進行發(fā)布和告知，要求企業(yè)級省大數據平臺系統(tǒng)按照該標準規(guī)范進行統(tǒng)一的數據管理。數據標準制定包括數據標準的編制、數據標準的審查、數據標準的發(fā)布。數據標準化管理組織將數據標準以正式發(fā)文的方式在全公司范圍內進行發(fā)布，并在發(fā)布后將數據標準、版本說明保存?zhèn)浒?。最終將發(fā)布的數據標準更新至數據標準管理模塊中，如圖63所示。圖63改為圖64數據標準管理的編制、審查、發(fā)布流程圖數據標準的編制、審查和發(fā)布通過數據標準管理模塊開發(fā)實現，其流程如圖63示：數據標準管理組織協(xié)調者組織數據提供者和執(zhí)行者參與數據標準屬性的收集和整理工作，并按照協(xié)商一致的原則形成數據標準初稿。數據標準初稿進行多次的討論和豐富后，形成數據標準送審稿提交給數據標準管理決策者。經過數據標準管理決策者的討論審核后，由數據標準管理組織協(xié)調者再次進行數據標準的修改完善，并完成數據標準的發(fā)布。. 數據標準執(zhí)行數省公司和各部門、分公司統(tǒng)一按照所制定的數據標準實施數據標準管理，數據標準的執(zhí)行流程如圖62所示。圖62數據標準管理的執(zhí)行流程圖 數據標準執(zhí)行的流程步驟如下： 數據標準制定發(fā)布后，將數據標準錄入到數據標準管理模塊。數據標準管理執(zhí)行者按照發(fā)布的數據標準，制定和發(fā)布數據標準接口。數據標準管理模塊將標準要求提供給數據質量管理根據已錄入系統(tǒng)的數據標準形成稽查規(guī)則，對數據標準管理執(zhí)行者制定和發(fā)布的數據標準接口中的內容進行相關的標準稽核監(jiān)控。將標準稽核結果發(fā)送給數據標準管理模塊，并反饋給數據標準管理決策者和數據標準管理執(zhí)行者。. 數據標準維護數據標準的維護指數據標準建立后，根據業(yè)務需求的發(fā)展變化或外部數據標準要求不一致時，對數據標準的內容進行變更和版本管理，如圖65所示。圖65數據標準管理的變更流程圖 數據標準管理的變更通過數據標準管理系統(tǒng)開發(fā)實現落地，其流程如圖65所示： 對執(zhí)行的相關數據標準進行變更請求的申請，組織該數據標準相關執(zhí)行層和各數據運維者進行討論和變更需求匯總。 由數據標準管理組織協(xié)調機構進行標準變更的審核。 討論審議數據標準項的變更內容，并形成標準變更需求審批表提交給數據標準管理決策層進行審批。 決策層將審批結果反饋給標準管理組織協(xié)調者，并由其進行數據標準發(fā)布及版本維護。. 數據標準監(jiān)控數據標準監(jiān)控實現對數據標準執(zhí)行過程的監(jiān)控，包括對數據標準的執(zhí)行、效果、問題進行監(jiān)控管理，為后期數據標準維護管理提供依據。數據標準的監(jiān)控通過數據標準