主數(shù)據(jù)管理和實施策略(編輯修改稿)
2025-05-04 22:56 本頁面
【文章內(nèi)容簡介】 管理系統(tǒng)邏輯架構(gòu) 在一個完整的主數(shù)據(jù)管理解決方案中，除了主數(shù)據(jù)管理的核心服務(wù)組件之外通常還會涉及到企業(yè)元數(shù)據(jù)管理、企業(yè)信息集成、ETL、數(shù)據(jù)分析和數(shù)據(jù)倉庫以及 EAI/ESB 等其他各種技術(shù)和服務(wù)組件。其中主數(shù)據(jù)管理服務(wù)又包括如下一些主要的服務(wù)組件： Interface Services：為企業(yè)中需要主數(shù)據(jù)的所有業(yè)務(wù)系統(tǒng)提供各種服務(wù)接口，通過實時的、批量的接口可以讀取或者修改主數(shù)據(jù)，這些接口包括 Batch, Web Services, XML Interface, Messaging Interface, Publish/Subscribe, Import/Export Services, Data Standardization Interface, Directory Integration 等。除了這些標(biāo)準(zhǔn)的技術(shù)接口之外 , 對于某些專有系統(tǒng)還提供適配器 (Adapter) 接口 , 通過適配器接口可以和一些特有的系統(tǒng)做接口，例如企業(yè)中的傳統(tǒng) (Legacy) 應(yīng)用系統(tǒng)或者 SAP 等打包應(yīng)用。 Lifecycle Management Services: 履行針對主數(shù)據(jù)的 CRUD 操作，執(zhí)行對主數(shù)據(jù)存儲庫中的數(shù)據(jù)進(jìn)行更新、存取和管理時的業(yè)務(wù)邏輯，除此之外，它還負(fù)責(zé)維護(hù)主數(shù)據(jù)的衍生信息，例如客戶之間的關(guān)系、客戶的偏好、客戶在各種客戶服務(wù)渠道上的行為軌跡等。 Lifecycle Management Services 貫穿整個主數(shù)據(jù)管理的生命周期，它利用 Data Quality Management Services 來確保數(shù)據(jù)質(zhì)量、利用 Master Data Event Management Services 來捕獲各種主數(shù)據(jù)變化等相關(guān)的事件，以及利用 Hierarchy and Relationship Management Services 用來維護(hù)數(shù)據(jù)實體之間的關(guān)系和層次。 Data Quality Management Services：確保主數(shù)據(jù)的質(zhì)量和標(biāo)準(zhǔn)化，這在主數(shù)據(jù)管理解決方案中一個非常重要的組件，在我們從各個業(yè)務(wù)系統(tǒng)獲取數(shù)據(jù)之后，要對數(shù)據(jù)進(jìn)行清洗和驗證，例如對于地址而言，要彌補(bǔ)地址的缺失、地市的缺失、郵編的缺失、進(jìn)行地址的標(biāo)準(zhǔn)化等。對于其他數(shù)據(jù)要進(jìn)行非空檢查、外鍵檢查、數(shù)據(jù)過濾等。然后要對數(shù)據(jù)進(jìn)行匹配 / 重復(fù)識別、自動進(jìn)行基于規(guī)則的合并 / 去重、交叉驗證等，并且還要遵從企業(yè)的數(shù)據(jù)管控規(guī)范和流程。它可以是 Master Data Management Services 的一個內(nèi)部組件，也可以調(diào)用整個企業(yè)的 Information Integrity Services 來實現(xiàn)。 Authoring Services：依據(jù)數(shù)據(jù)管控流程，定義和擴(kuò)展企業(yè)的主數(shù)據(jù)模型。 Hierarchy Relationship and Management Services：定義數(shù)據(jù)實體的層次 (Hierarchy), 分組 (Grouping), 關(guān)系 (Relationship), 版本 (Version) 等。 Master Data Event Management Services：捕獲事件并且觸發(fā)相應(yīng)的操作，包括事件發(fā)現(xiàn)、事件管理和通知功能，它在主數(shù)據(jù)管理系統(tǒng)和業(yè)務(wù)系統(tǒng)之間進(jìn)行數(shù)據(jù)同步時起到至關(guān)重要的作用。 Base Services：提供通用服務(wù)，包括安全控制、錯誤處理、交易日志、事件日志等功能。 Master Data Repository:主數(shù)據(jù)存儲庫，包括 Metadata, Master Data, History Data, Reference Data 等。下面我們介紹兩個這些邏輯組件之間的協(xié)作場景：圖 5. 場景 1 初始數(shù)據(jù)加載 場景 1：初始數(shù)據(jù)加載：1 源數(shù)據(jù)從外部業(yè)務(wù)系統(tǒng)及 EDW 系統(tǒng)中通過批處理方式拷貝到磁帶；1 數(shù)據(jù)被加載到 Staging DB，進(jìn)行數(shù)據(jù)質(zhì)量分析；1 Data Quality Management Services 對數(shù)據(jù)進(jìn)行清洗、匹配、標(biāo)準(zhǔn)化等；1 ETL Transform and Load services 對合格數(shù)據(jù)進(jìn)行轉(zhuǎn)換并準(zhǔn)備好加載數(shù)據(jù)；1 Master Data Interface Services 接收批處理更新請求，調(diào)用 Lifecycle Management Update Service 進(jìn)行數(shù)據(jù)的批量更新；1 Lifecycle Management Update Service 調(diào)用 Hierarchy amp。 Relationship Management Services 和 Base Services 更新主數(shù)據(jù)庫。圖 6. 場景 2 主數(shù)據(jù)庫更新，然后同步到各業(yè)務(wù)系統(tǒng) 場景2：主數(shù)據(jù)庫更新，然后同步到各業(yè)務(wù)系統(tǒng)1 某業(yè)務(wù)系統(tǒng)發(fā)起一個創(chuàng)建主數(shù)據(jù)的交易，該業(yè)務(wù)系統(tǒng)將交易數(shù)據(jù)以消息的形式發(fā)送到消息隊列；1 MDM Interface Services 捕獲該消息，進(jìn)行消息解析，并調(diào)用 Security and Privacy Services 進(jìn)行權(quán)限驗證；1 MDM Interface Services 調(diào)用 Lifecycle Mgmt. Update Service ；1 Lifecycle Mgmt. Update Service 再調(diào)用 Data Quality Management Services 進(jìn)行數(shù)據(jù)的清洗和標(biāo)準(zhǔn)化；1 Update Service 調(diào)用 Search Services 發(fā)現(xiàn)該主數(shù)據(jù)已經(jīng)存在，確認(rèn)這是對已有主數(shù)據(jù)的更新操作；1 Update Service 通過調(diào)用外部系統(tǒng)對數(shù)據(jù)進(jìn)行擴(kuò)充；1 Update Service 在更新主數(shù)據(jù)庫之前調(diào)用 Event Management Services ；1 Event Manageme
公司管理相關(guān)推薦
鄂ICP備17016276號-1