聯(lián)通經(jīng)營(yíng)分析系統(tǒng)的dw模型(已修改)
2025-07-29 18:38 本頁(yè)面
【正文】 經(jīng)營(yíng)分析系統(tǒng)的 DW模型 一、寫(xiě)在前面 本文的目的是為了介紹聯(lián)通經(jīng)營(yíng)分析系統(tǒng)的統(tǒng)一 DW模型 (UniDW)，這份模型已經(jīng)通過(guò)概念模型（ CDM）的形式發(fā)布，為了深入理解設(shè)計(jì)的思路，這里做一個(gè)大致的說(shuō)明。本文首先回答為什么會(huì)有統(tǒng)一 DW 模型，再簡(jiǎn)要述說(shuō)經(jīng)營(yíng)分析關(guān)注的業(yè)務(wù)領(lǐng)域，最后再逐一介紹統(tǒng)一 DW 模型中的結(jié)構(gòu)。希望能夠和正在建設(shè)聯(lián)通經(jīng)營(yíng)分析系統(tǒng)的同志們或是在其他領(lǐng)域建設(shè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的同行們一起探討一下數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)。 二、為什么有統(tǒng)一 DW模型？ 在聯(lián)通經(jīng)營(yíng)分析系統(tǒng)中，第一階段主要關(guān)注的分析主題是圍繞用戶而展開(kāi)的，以 前，對(duì)于用戶、客戶的概念模糊不清，經(jīng)常混淆兩者。甚至在總部統(tǒng)一經(jīng)營(yíng)分析系統(tǒng)業(yè)務(wù)規(guī)范中也是如此?？蛻粝嚓P(guān)的分析主題也有，諸如客戶的年齡構(gòu)成、職業(yè)構(gòu)成等，但是由于數(shù)據(jù)源不干凈，無(wú)法保證客戶資料的準(zhǔn)確性，所以這部分的分析不是目前階段的重點(diǎn)。因此，我們現(xiàn)在提出的統(tǒng)一 DW 模型主要圍繞用戶的信息而設(shè)計(jì)的。關(guān)于用戶和客戶的區(qū)別在后面有詳細(xì)介紹。 首先，我們要明確統(tǒng)一 DW 模型的目的。在經(jīng)營(yíng)分析數(shù)據(jù)倉(cāng)庫(kù)中，我們一般將它劃分層 ODS、 DW和 DM層， DW層指的是位于 ODS之上， DM層數(shù)據(jù)之下的那一層數(shù)據(jù)結(jié)構(gòu)，這一層的數(shù)據(jù)結(jié)構(gòu)的 主要任務(wù)是完成數(shù)據(jù)的預(yù)處理和沉淀。 ODS 的全稱(chēng)是 Operational Datastore，它基本是按照數(shù)據(jù)源的模式存儲(chǔ)數(shù)據(jù)，也就是偏向于事務(wù)型的數(shù)據(jù)存儲(chǔ)，從這一層的數(shù)據(jù)結(jié)構(gòu)，我們要進(jìn)行 OLAP分析很困難，因?yàn)樗皇蔷S度建模的，雖然我們?cè)跀?shù)據(jù)源到 ODS這一過(guò)程的主要任務(wù)是進(jìn)行代碼轉(zhuǎn)化（將代碼轉(zhuǎn)換為 ID）和數(shù)據(jù)清洗。 ODS層存在的目的在于降低數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)與 OLTP 系統(tǒng)的耦合程度，因?yàn)閺?OLTP 數(shù)據(jù)源到 ODS 層表的規(guī)則一般都是非常簡(jiǎn)單，數(shù)據(jù)源抽取的規(guī)則復(fù)雜度很低。 ODS 層存在的另一個(gè)目的是提供即席查詢，諸如離網(wǎng) 客戶名單，高價(jià)值客戶名單等，涉及到詳細(xì)信息時(shí)，必須從 ODS層出數(shù)據(jù)。 DM 層的目的很簡(jiǎn)單，它不是做數(shù)據(jù)沉淀之用，而是作為裝載 Cube所需的臨時(shí)表，主要為性能考慮，便于流程處理，存儲(chǔ)的數(shù)據(jù)也是最近一個(gè)時(shí)期的數(shù)據(jù)。因?yàn)槎嗑S分析的需求是經(jīng)常變化的，所以這一層的結(jié)構(gòu)也是頻繁變化的，我們?cè)谠O(shè)計(jì)時(shí)考慮將這一層數(shù)據(jù)結(jié)構(gòu)放在邏輯設(shè)計(jì)之外（要讓邏輯設(shè)計(jì)盡量保持穩(wěn)定）。所幸的是這一層的結(jié)構(gòu)非常簡(jiǎn)單，當(dāng)一個(gè)分析主題確定時(shí)，也即維度、度量確定下來(lái)后， DM表的結(jié)構(gòu)也隨之確定，所以這一層表的創(chuàng)建和數(shù)據(jù)的裝載工作目前都?xì)w于多維分析實(shí)施的 工作。 正是由于用戶需求的頻繁變化，我們必須要有一個(gè)強(qiáng)大而穩(wěn)定的 DW 層表，它包含絕大多數(shù)的分析維度和度量，并且具有足夠時(shí)間跨度的數(shù)據(jù)沉淀。這種數(shù)據(jù)沉淀必須要是穩(wěn)定的，在經(jīng)營(yíng)分析系統(tǒng)建設(shè)初期，數(shù)據(jù)沉淀的概念還是不清楚的，很多情況是將在若干維度匯總?cè)舾啥攘康臄?shù)據(jù)當(dāng)作沉淀，但是一旦從一個(gè)新的維度分析同樣的度量，那么這個(gè)匯總數(shù)據(jù)一點(diǎn)用都沒(méi)有。另外，這個(gè) DW層必須是和 OLTP系統(tǒng)是絕對(duì)低耦合的， DW應(yīng)該只和業(yè)務(wù)主題、分析邏輯相關(guān)，而不應(yīng)該同 OLTP系統(tǒng)的某個(gè)字段扯不清。只有這樣，我們的 DW層才能被復(fù)用。對(duì)于用戶不斷變 化的需求， DW設(shè)計(jì)在一定范圍內(nèi)也要能夠適應(yīng)這種變更，這就要求對(duì)擴(kuò)展性設(shè)計(jì)的要求。綜上所述，設(shè)計(jì) DW層要達(dá)到以下目標(biāo)： ? 數(shù)據(jù)沉淀的穩(wěn)定性。能夠保證數(shù)據(jù)沉淀不是白費(fèi)空間、時(shí)間； ? 數(shù)據(jù)結(jié)構(gòu)的重用性。能夠保證數(shù)據(jù)結(jié)構(gòu)的通用性，和數(shù)據(jù)源無(wú)關(guān)； ? 數(shù)據(jù)結(jié)構(gòu)的擴(kuò)展性。能夠適應(yīng)需求的變更； 都說(shuō)數(shù)據(jù)倉(cāng)庫(kù)是面向主題的、集成的、相對(duì)穩(wěn)定的、反映歷史變化的，可是究竟這些字里行間的意義是什么呢？我們認(rèn)為在面向主題之前，首先要面向?qū)ο?，這里的對(duì)象指的是電信業(yè)務(wù)中的 實(shí)體，用戶可以算是一個(gè)實(shí)體，其他的諸如客戶、產(chǎn)品、渠道、競(jìng)爭(zhēng)對(duì)手等都是實(shí)體。對(duì)每個(gè)實(shí)體，要將他們的基本信息、消費(fèi)信息集成起來(lái)，形成穩(wěn)定的數(shù)據(jù)結(jié)構(gòu)，并在時(shí)間上進(jìn)行沉淀。前面我們提到目前經(jīng)營(yíng)分析的重點(diǎn)實(shí)體是用戶，按照不同的維度對(duì)用戶進(jìn)行分群，分析他們的數(shù)量、消費(fèi)、業(yè)務(wù)使用量等。 三、經(jīng)營(yíng)分析系統(tǒng)關(guān)注的業(yè)務(wù) 經(jīng)營(yíng)分析關(guān)注的主要是結(jié)果，例如關(guān)注用戶的信用度，而不是如何對(duì)用戶進(jìn)行信用控制；關(guān)注用戶的開(kāi)帳金額，而不是用戶的開(kāi)帳優(yōu)惠規(guī)則；關(guān)注用戶的二次批價(jià)詳單，而不是如何進(jìn)行二次批價(jià)等。 目前，經(jīng)營(yíng)分析所獲取的數(shù)據(jù)源 來(lái)自綜合營(yíng)帳系統(tǒng)、計(jì)費(fèi)系統(tǒng)、客服系統(tǒng)和結(jié)算系統(tǒng)，主要也就是來(lái)自前兩者。對(duì)于不同的廠商，它們的系統(tǒng)各自不同，通過(guò)分析看到，它們的結(jié)構(gòu)自然都是類(lèi)似的，因?yàn)楫吘褂幸粋€(gè)綜合營(yíng)帳系統(tǒng)的技術(shù)規(guī)范在那里，并且也經(jīng)過(guò)一段時(shí)間的洗禮，廠商也不能走得太遠(yuǎn)。它們對(duì)于詳細(xì)的處理細(xì)節(jié)可能不盡相同，但是對(duì)于最終我們關(guān)注的結(jié)果性的數(shù)據(jù)結(jié)構(gòu)，還是可以統(tǒng)一的。目前，在 ODS 層，我們沒(méi)有統(tǒng)一，因?yàn)闅v史原因，我們現(xiàn)在也很難統(tǒng)一這一層，但是毫無(wú)疑問(wèn)，這一層在一定程度上也是可以統(tǒng)一的，將主要差異體現(xiàn)數(shù)據(jù)源到 ODS的規(guī)則上，而不要體現(xiàn)在結(jié)構(gòu)上，只是目 前做到統(tǒng)一 DW 層還是比較現(xiàn)實(shí)的。在此，可以將這些需要關(guān)注的結(jié)果性數(shù)據(jù)歸類(lèi)如下： 客戶資料類(lèi) 這里有一系列表存放客戶信息，核心概念就是三戶關(guān)系，客戶、帳戶與用戶。它將客戶的基本信息，客戶消費(fèi)的信息和與運(yùn)營(yíng)商某個(gè)業(yè)務(wù)的契約信息分開(kāi)。這三者之間的關(guān)系可以想象成是一棵樹(shù)，客戶位于樹(shù)的根部，帳戶在中間，用戶是第三層葉節(jié)點(diǎn)。一個(gè)客戶擁有多個(gè)帳戶，一個(gè)帳戶下可以有多個(gè)用戶，用戶是最細(xì)的單位，在經(jīng)營(yíng)分析中，目前的統(tǒng)計(jì)分析大多都是針對(duì)用戶進(jìn)行統(tǒng)計(jì)，但是由于術(shù)語(yǔ)定義的不嚴(yán)格，在很多場(chǎng)合下，將客戶和用戶混為一談，例如經(jīng)常說(shuō)的客戶 數(shù)通常是用戶數(shù)（不是絕對(duì)），用戶級(jí)別其實(shí)是客戶級(jí)別。 當(dāng)一個(gè)客戶入網(wǎng)時(shí)，例如選定 CDMA 業(yè)務(wù)，一般情況下會(huì)為這個(gè)客戶建立一套三戶關(guān)系，當(dāng)然如果一個(gè)客戶申請(qǐng)一項(xiàng)新業(yè)務(wù)，例如 193 長(zhǎng)途，如果想用已有的帳戶繳費(fèi)，可以只需建一個(gè)新用戶，如果它想在另一個(gè)帳戶繳費(fèi)，則再建一個(gè)新的帳戶。在客戶信息，我們關(guān)注的信息是客戶類(lèi)型、客戶級(jí)別、性別、年齡、職業(yè)等。在帳戶中，我們通常關(guān)注的是帳戶的繳費(fèi)類(lèi)型、預(yù)存款等，用戶入網(wǎng)時(shí)可以首先指定他是用現(xiàn)金繳費(fèi)還是銀行代扣等信息，對(duì)于銀行代扣等類(lèi)型，還記錄銀行名稱(chēng)、帳號(hào)等。用戶信息中，有用戶 的手機(jī)號(hào)、服務(wù)狀態(tài)、入網(wǎng)時(shí)間、是否有效等契約信息。 關(guān)于用戶，還有一個(gè)子業(yè)務(wù)信息，或稱(chēng)特服，例如來(lái)電顯示、移動(dòng)秘書(shū)臺(tái)、三方通話，這些信息表明該用戶除了基本的通話功能外，還有哪些特殊的服務(wù)，它們通常和服務(wù)屬性存儲(chǔ)在一塊（其實(shí)特服本身就是一種服務(wù)屬性），例如漫游級(jí)別、長(zhǎng)途級(jí)別等。有的系統(tǒng)通過(guò)掩碼來(lái)表明用戶訂購(gòu)了哪些特服或是哪些服務(wù)屬性（如東軟、神碼的營(yíng)帳），有的是通過(guò)單獨(dú)的表來(lái)維護(hù)用戶開(kāi)通了哪些特服（如亞信的營(yíng)帳）。 帳務(wù)類(lèi)
公司管理相關(guān)推薦
鄂ICP備17016276號(hào)-1