【正文】 據(jù)量嚴(yán)重影響的 ? 數(shù)據(jù)挖掘的工作和數(shù)據(jù)倉庫工作是分開的 ? 對某些高級用戶來說，數(shù)據(jù)倉庫前端應(yīng)用是可以由用戶自己開發(fā)的 ? 系統(tǒng)只提供現(xiàn)有系統(tǒng)中有的數(shù)據(jù)，沒有的數(shù)據(jù)應(yīng)該盡可能的少 基礎(chǔ)知識 ? 數(shù)據(jù)倉庫的需求可以分成六種方式 固定報(bào)表和隨機(jī)查詢的關(guān)系 ? 固定報(bào)表和 OLAP查詢的關(guān)系 ? 什么樣的需求適合作為OLAP查詢 ? 什么樣的需求適合作為固定報(bào)表和隨機(jī)查詢 ? 什么樣的需求適合開發(fā)應(yīng)用程序 ? Portal應(yīng)用的特點(diǎn)和局限性 ?什么樣的需求適合使用數(shù)據(jù)分析 實(shí)現(xiàn)需求的方式 ? 制作一個(gè)實(shí)際的案例，說明工具的使用方法 ? 結(jié)合實(shí)現(xiàn)需求的方式 ，介紹工具的使用方法 ? 結(jié)合實(shí)現(xiàn)需求的方式，說明工具本身的限制 ? 根據(jù)工具的優(yōu)勢和特點(diǎn)，幫助客戶代表理解提出業(yè)務(wù)需求的方式 工具使用方法培訓(xùn) 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 62 目 錄 ? 實(shí)施一個(gè)完整的數(shù)據(jù)倉庫項(xiàng)目，都要完成那些工作？都要編寫那些項(xiàng)目文檔？ ? 數(shù)據(jù)倉庫項(xiàng)目實(shí)施是應(yīng)該從模型映射開始還是從需求分析開始？ ? 如果在數(shù)據(jù)倉庫建設(shè)過程中使用業(yè)務(wù)邏輯模型，是引進(jìn)模型還是自建模型合適？ ? 怎樣在數(shù)據(jù)倉庫建設(shè)過程中實(shí)施數(shù)據(jù)質(zhì)量管理？究竟怎樣的數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)才是合適的？ ? 數(shù)據(jù)倉庫應(yīng)用培訓(xùn)應(yīng)該在項(xiàng)目實(shí)施的那個(gè)階段進(jìn)行？ ? 數(shù)據(jù)倉庫項(xiàng)目實(shí)施中，怎樣解決手工補(bǔ)錄數(shù)據(jù)的問題？ ? 怎樣設(shè)計(jì)和實(shí)施數(shù)據(jù)倉庫管理程序？它都有那些內(nèi)容？ 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 63 為什么需要在數(shù)據(jù)倉庫系統(tǒng)中設(shè)計(jì)手工補(bǔ)錄程序 ? 理論上： 數(shù)據(jù)倉庫中的數(shù)據(jù)是可以 Update的 數(shù)據(jù)倉庫中的數(shù)據(jù)是不能 Delete的 ? 實(shí)際上： 用戶需要手工調(diào)整數(shù)據(jù)倉庫中的數(shù)據(jù) 數(shù)據(jù)的計(jì)算規(guī)則經(jīng)常改變 業(yè)務(wù)系統(tǒng)中的數(shù)據(jù)缺失 數(shù)據(jù)管理能力和支持能力薄弱 ? 后果： 系統(tǒng)架構(gòu)要能夠應(yīng)對更加頻繁的數(shù)據(jù)增、刪、改操作 直接對數(shù)據(jù)倉庫執(zhí)行增、刪、改操作不現(xiàn)實(shí)，必須提供一種獨(dú)立于數(shù)據(jù)倉庫之外的系統(tǒng)架構(gòu)來完成補(bǔ)錄數(shù)據(jù)的工作 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 64 在數(shù)據(jù)采集系統(tǒng)架構(gòu)中使用獨(dú)立的數(shù)據(jù)手工補(bǔ)錄數(shù)據(jù)庫 手 工 補(bǔ)錄 庫小 型 數(shù)據(jù) 庫技 術(shù) 元數(shù) 據(jù) A技 術(shù) 元數(shù) 據(jù) B數(shù) 據(jù) 轉(zhuǎn)存 庫數(shù) 據(jù) 文 本T 表T 表T 表數(shù) 據(jù) 倉 庫數(shù) 據(jù) 采 集 服 務(wù) 器緩 存 區(qū)商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 65 這樣做的優(yōu)勢 ? 首先可以降低數(shù)據(jù)轉(zhuǎn)存庫和數(shù)據(jù)倉庫物理設(shè)計(jì)的難度 要完成手工補(bǔ)錄數(shù)據(jù)的工作，數(shù)據(jù)庫必須能夠支持增、刪、改操作，并提供相應(yīng)的安全管理功能。而數(shù)據(jù)轉(zhuǎn)存庫和數(shù)據(jù)倉庫中存儲了大量的數(shù)據(jù)，要使它能夠應(yīng)對頻繁的增、刪、改操作，物理設(shè)計(jì)的難度很高。但是如果把手工補(bǔ)錄數(shù)據(jù)庫獨(dú)立存放在數(shù)據(jù)采集服務(wù)器中，那么不但手工補(bǔ)錄數(shù)據(jù)庫的物理設(shè)計(jì)比較簡單，數(shù)據(jù)倉庫和數(shù)據(jù)轉(zhuǎn)存庫的物理設(shè)計(jì)也會簡單很多。 ? 其次，這樣做也為手工補(bǔ)錄數(shù)據(jù)程序開發(fā)提供了相對寬松的環(huán)境 數(shù)據(jù)倉庫的數(shù)據(jù)量都是很大的，如果面向它們開發(fā)手工補(bǔ)錄程序，那么對接口程序和存儲過程設(shè)計(jì)要求都很高。但如果單獨(dú)設(shè)計(jì)手工補(bǔ)錄數(shù)據(jù)庫，就可以大幅度降低這類接口程序的設(shè)計(jì)難度，從而提供相對寬松的接口程序開發(fā)環(huán)境。 ? 可以避免由于手工補(bǔ)錄數(shù)據(jù)的時(shí)間滯后造成的“相同查詢，不同時(shí)間返回不同查詢結(jié)果”的錯(cuò)誤 例如，查詢上周的銷售總金額。由于上周六的銷售數(shù)據(jù)沒有錄入手工補(bǔ)錄數(shù)據(jù)庫，第一次查詢時(shí)系統(tǒng)將返回缺少周六銷售數(shù)據(jù)的查詢結(jié)果。現(xiàn)在把周六的數(shù)據(jù)補(bǔ)錄進(jìn)數(shù)據(jù)倉庫，第二次查詢的結(jié)果和第一次查詢的結(jié)果就會完全不同，于是出現(xiàn)了“相同查詢，不同時(shí)間返回不同查詢結(jié)果”的錯(cuò)誤。如果使用獨(dú)立的手工補(bǔ)錄數(shù)據(jù)庫，就可以通過技術(shù)元數(shù)據(jù) B，控制補(bǔ)錄數(shù)據(jù)裝載到數(shù)據(jù)倉庫中的時(shí)間和頻率，并提供明顯的數(shù)據(jù)缺失提示。這樣，在第一次查詢的時(shí)候，就可以向用戶提供“缺失周六銷售數(shù)據(jù)”的提示。 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 66 在數(shù)據(jù)倉庫中設(shè)計(jì) Rule表來滿足修改數(shù)據(jù)關(guān)系的要求 技 術(shù) 元 數(shù)據(jù) BT 表事 實(shí) 表 A事 實(shí) 表 A事 實(shí) 表 AR E P O R T 表業(yè) 務(wù) 元 數(shù)據(jù) 表規(guī) 則 表事 實(shí) 表 B業(yè) 務(wù) 元 數(shù)據(jù) 表安 全 控 制 表R 表業(yè) 務(wù) 元 數(shù)據(jù) 表報(bào) 表 查 詢 層初 級 匯 總 層基 礎(chǔ) 數(shù) 據(jù) 層規(guī)則表 : 是一種比較特殊的數(shù)據(jù)表，它記錄了某些特殊的數(shù)據(jù)運(yùn)算規(guī)則，比如流動(dòng)資產(chǎn)＝現(xiàn)金＋銀行存款。從業(yè)務(wù)上看，它可以認(rèn)為是業(yè)務(wù)元數(shù)據(jù)的一種表現(xiàn)形式。 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 67 這樣做的優(yōu)勢 ? 規(guī)則表記錄了生成報(bào)表數(shù)據(jù)的公式，比如字段 C ＝ 字段 A ＋ 字段 B ? 優(yōu)勢： 同時(shí)保留了計(jì)算公式修改前和計(jì)算公式修改后的數(shù)據(jù)，使用戶不會因?yàn)樾薷挠?jì)算公式而導(dǎo)致歷史數(shù)據(jù)改變的問題 ? 劣勢： 為開發(fā)和維護(hù)這種數(shù)據(jù)表需要支付相當(dāng)?shù)木S護(hù)成本，例如要獨(dú)立設(shè)計(jì)一個(gè)手工維護(hù)規(guī)則 表的程序 ? 限制條件： 數(shù)據(jù)是一定不得更改的企業(yè)歷史核心數(shù)據(jù)，而數(shù)據(jù)的計(jì)算公式是經(jīng)常變化的 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 68 目 錄 ? 實(shí)施一個(gè)完整的數(shù)據(jù)倉庫項(xiàng)目，都要完成那些工作？都要編寫那些項(xiàng)目文檔？ ? 數(shù)據(jù)倉庫項(xiàng)目實(shí)施是應(yīng)該從模型映射開始還是從需求分析開始？ ? 如果在數(shù)據(jù)倉庫建設(shè)過程中使用業(yè)務(wù)邏輯模型，是引進(jìn)模型還是自建模型合適？ ? 怎樣在數(shù)據(jù)倉庫建設(shè)過程中實(shí)施數(shù)據(jù)質(zhì)量管理？究竟怎樣的數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)才是合適的？ ? 數(shù)據(jù)倉庫應(yīng)用培訓(xùn)應(yīng)該在項(xiàng)目實(shí)施的那個(gè)階段進(jìn)行？ ? 數(shù)據(jù)倉庫項(xiàng)目實(shí)施中，怎樣解決手工補(bǔ)錄數(shù)據(jù)的問題？ ? 怎樣設(shè)計(jì)和實(shí)施數(shù)據(jù)倉庫管理程序？它都有那些內(nèi)容？ 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 69 數(shù)據(jù)倉庫管理程序的作用 ? 原因： 數(shù)據(jù)量膨脹的速度經(jīng)常比預(yù)計(jì)的要快很多 由分析需要導(dǎo)致數(shù)據(jù)倉庫內(nèi)數(shù)據(jù)的范圍越來越廣 與現(xiàn)有的數(shù)據(jù)倉庫應(yīng)用環(huán)境有沖突 這些都使控制系統(tǒng)維護(hù)成本成為數(shù)據(jù)倉庫系統(tǒng)管理需求的難點(diǎn) ? 目標(biāo)： 為管理、維護(hù)現(xiàn)有的數(shù)據(jù)倉庫系統(tǒng)制定明確可行的管理方法 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 70 數(shù)據(jù)倉庫管理程序需要承擔(dān)的任務(wù) 數(shù)據(jù)版本控制信息 數(shù)據(jù)的修復(fù) 和備份計(jì)劃 數(shù)據(jù)安全 管理體系 數(shù)據(jù)審 核流程 數(shù)據(jù)可 用性監(jiān)測 數(shù)據(jù)倉庫 的性能監(jiān)護(hù) 數(shù)據(jù)倉庫 管理報(bào)告 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 71 在數(shù)據(jù)倉庫項(xiàng)目實(shí)施過程中實(shí)施數(shù)據(jù)管理程序 上線實(shí)施 需求調(diào)研 系統(tǒng)設(shè)計(jì) 系統(tǒng)開發(fā) ?管理程序運(yùn)行需求 ?數(shù)據(jù)恢復(fù)需求 ?數(shù)據(jù)存檔和恢復(fù)需求 ?數(shù)據(jù)安全和控制需求 ?數(shù)據(jù)倉庫審計(jì)需求 ?數(shù)據(jù)監(jiān)控需求 ?數(shù)據(jù)倉庫管理報(bào)告 ?數(shù)據(jù)倉庫監(jiān)督需求 ?設(shè)計(jì)時(shí)間調(diào)度模塊 ?設(shè)計(jì)系統(tǒng)備份和數(shù)據(jù)恢復(fù)模式 ?設(shè)計(jì)數(shù)據(jù)轉(zhuǎn)存的模塊 ?設(shè)計(jì)安全控制模塊 ?設(shè)計(jì)數(shù)據(jù)審計(jì)模塊 ?設(shè)計(jì)數(shù)據(jù)監(jiān)控模塊 ?設(shè)計(jì)數(shù)據(jù)倉庫管理報(bào)表 ?制定 《 數(shù)據(jù)倉庫管理系統(tǒng)開發(fā)計(jì)劃 》 ?編寫 《 數(shù)據(jù)倉庫系統(tǒng)設(shè)計(jì)說明書 》 ? 制定開發(fā)工作計(jì)劃 ? 開發(fā)數(shù)據(jù)恢復(fù)和系統(tǒng)備份模塊 ? 開發(fā)數(shù)據(jù)存檔模塊 ? 開發(fā)系統(tǒng)數(shù)據(jù)安全和控制管理模塊 ? 開發(fā)系統(tǒng)數(shù)據(jù)審計(jì)模塊 ? 開發(fā)系統(tǒng)監(jiān)控模塊 ? 開發(fā)管理報(bào)告模塊 ? 執(zhí)行數(shù)據(jù)倉庫管理程序單元測試 ?總結(jié)數(shù)據(jù)倉庫的性能指標(biāo) ?數(shù)據(jù)倉庫系統(tǒng)整體優(yōu)化 ?制定和編寫 《 數(shù)據(jù)倉庫管理計(jì)劃 》 商業(yè)智能需求 用需求來創(chuàng)造價(jià)值 2022/10/23 張峰嶺 Email: :190340846 72 討 論 與 交 流