【正文】 :42:0202:42Jan2320Jan23 ? 1越是無能的人，越喜歡挑剔別人的錯兒。 。 ? 在建立 ODS系統(tǒng)時采用“自底向上”的技術(shù)路線。 ? ODS體系提供了一個建設(shè)企業(yè)全局?jǐn)?shù)據(jù)庫系統(tǒng)的正確路線和方法。 ? 只建立 ODS，不建立 DW ? 同步建立 ? 一種常見的方案 ODS數(shù)據(jù)生成過程 ? 創(chuàng)建 ODS的過程 ? 在系統(tǒng)運行過程中獲取數(shù)據(jù) ? 在 ODS層建立一級數(shù)據(jù)存儲 ? 向 DW傳輸數(shù)據(jù) ? 在 OLTPODSDW體系結(jié)構(gòu)中， ODS是向DW提供數(shù)據(jù)的重要數(shù)據(jù)源。 一些假定 ? 假定 ? 企業(yè)已經(jīng)建有大量非集成的操作型應(yīng)用 ? DW數(shù)據(jù)模型已經(jīng)建立 ? 需要建立一個 ODS數(shù)據(jù)環(huán)境 ? 則建立 OLTPODSDW體系結(jié)構(gòu)的過程為 …… （ 1）建立面向主題的數(shù)據(jù)庫世界 ? 前期 ? 了解原有業(yè)務(wù)應(yīng)用系統(tǒng)中的數(shù)據(jù)模型； ? 加強對原應(yīng)用數(shù)據(jù)庫環(huán)境的認(rèn)識。同時兩者是可以相互結(jié)合、相互補充的。 ? 對于一個大型企業(yè)而言，有可能存在分層的 ODS環(huán)境。原因是要進行數(shù)據(jù)集成。 ? 也就是說，有些處理是操作型的，但不適合在操作型 DB中進行，而又存在著一些分析型處理，但不適合在 DW中進行。 ? 區(qū)別于與分散在各個 OLTP應(yīng)用的數(shù)據(jù)： ? 面向主題、集成化。 ? 信息型處理 ? 指只有查詢操作的工作模式。 （ 2） ODS與 DW數(shù)據(jù)量級不同 ? DW的數(shù)據(jù)量要遠(yuǎn)遠(yuǎn)超出 ODS的數(shù)據(jù)量 ? DW保存大量的歷史數(shù)據(jù) ? ODS只存放當(dāng)前和接近當(dāng)前的細(xì)節(jié)數(shù)據(jù) ? ODS為獲得較高的系統(tǒng)性能，一部分固定數(shù)據(jù)信息不包含在內(nèi)。 ? 增加維護代價 （ 3）對于 DW的數(shù)據(jù)集成 ? DW的記錄系統(tǒng)分散于各非集成的應(yīng)用之中，這時由于各個應(yīng)用的數(shù)據(jù)： ? 數(shù)據(jù)分散 ? 變化快速 ? DW對數(shù)據(jù)進行集成時 ? DW的轉(zhuǎn)換接口將很復(fù)雜 ? 要處理好各應(yīng)用在時間上的同步等問題。 ? 在進行 ODS模式分解時，更應(yīng)考慮 ODS數(shù)據(jù)處理的自身特點（由自身的需求決定）； ? DW只進行分析型處理， DW與操作型環(huán)境的界限分明，可以只依據(jù)數(shù)據(jù)的分析處理要求形成各個主題。 DW數(shù)據(jù)源重定位的兩種方式 ? 方式一 ? 一旦 ODS中保存了數(shù)據(jù)，那么 DW的相關(guān)部分就可以不再從 OLTP的 DB中抽取數(shù)據(jù)，而以 ODS為數(shù)據(jù)源。 ? 隨著數(shù)據(jù)庫技術(shù)和應(yīng)用水平的快速發(fā)展，這種方法建立起來的 ODS可能會較早地不適應(yīng)這一發(fā)展要求，因而它具有較大的技術(shù)局限性。ODS是對 DW的一個重要補充 ? ODS是一個面向主題的全局?jǐn)?shù)據(jù)庫，以 ODS為核心建設(shè)一致的企業(yè)數(shù)據(jù)庫應(yīng)用體系結(jié)構(gòu)是一個重要的思路 本章結(jié)束 ? 靜夜四無鄰，荒居舊業(yè)貧。 2023年 1月 20日星期五 上午 2時 42分 2秒 02:42: ? 1楚塞三湘接，荊門九派通。 上午 2時 42分 2秒 上午 2時 42分 02:42: MOMODA POWERPOINT Lorem ipsum dolor sit amet, consectetur adipiscing elit. Fusce id urna blandit, eleifend nulla ac, fringilla purus. Nulla iaculis tempor felis ut cursus. 感謝您的下載觀看 專家告訴 。 02:42:0202:42:0202:42Friday, January 20, 2023 ? 1不知香積寺，數(shù)里入云峰。 …… ? 數(shù)據(jù)源定義 ? 采購子系統(tǒng)：供應(yīng)商號，進價，供應(yīng)量， … ? 庫存子系統(tǒng)：商品號，類別，庫存量， … ? 銷售子系統(tǒng)：售出量，顧客號，年齡，住址，電話，售價，金額， … 步驟 4—裝入數(shù)據(jù)，開發(fā)應(yīng)用程序 ? 數(shù)據(jù)裝入（數(shù)據(jù)集成實現(xiàn)，工具或開發(fā)） ? 數(shù)據(jù)初裝 ? 數(shù)據(jù)追加 ? 開發(fā) ODS之上的應(yīng)用程序 ? 商場采購決策支持系統(tǒng) 用于問題解決 ? 問題 : ? 某某商品是否要進貨？ ? 進行如下數(shù)據(jù)分析 ? 第一步，在商品主題中進行商品近期銷售情況報告，得出商品的資金周轉(zhuǎn)情況、盈利率、庫存量，比較以后做出是否進貨的決定； ? 第二步，如果需要進貨，則可分析供應(yīng)商主題中的相關(guān)信息，再依據(jù)資金情況，確定采購?fù)緩胶筒少彅?shù)據(jù)等。 ? 在這種情況下，從這些成功的應(yīng)用系統(tǒng)中去抽取一致數(shù)據(jù)來建立 ODS，并最終形成一個完善的企業(yè)數(shù)據(jù)庫應(yīng)用體系結(jié)構(gòu)這樣一個“自底向上”的技術(shù)會更可行。 ? ODS數(shù)據(jù)裝入過程 : ? 數(shù)據(jù)初裝 ? 初裝完成后的數(shù)據(jù)追加兩個階段 ①數(shù)據(jù)初裝 ? ODS數(shù)據(jù)初裝宜小步伐 ? 以防數(shù)據(jù)模式會發(fā)生變化 ? 分批裝入 ? 采取邊裝入，邊運行，邊了解需求，邊完善模型，邊豐富數(shù)據(jù)的方式。 銷售 庫存 采購 商品主題 無關(guān)內(nèi)容 有關(guān)內(nèi)容 關(guān)心原有 OLTP系統(tǒng)的原因 ? 建立 ODS需要了解它的數(shù)據(jù)源 ? 通過了解數(shù)據(jù)源，以便完成 ODS中需要的數(shù)據(jù)處理 ? 可能有企業(yè)級 OLTP（ ODS所起的作用相當(dāng)于原有各 DB系統(tǒng)的全局控制者和管理者），ODS成為數(shù)據(jù)源向 OLTP環(huán)境擴散數(shù)據(jù)，了解目標(biāo)； ? 即時 OLAP， OLTP環(huán)境作為數(shù)據(jù)源，了解來源。 ? 如果不建設(shè) ODS，而僅建立 OLTPDW兩層體系結(jié)構(gòu)，則 …… （ 1） 若要實現(xiàn)全局 OLTP ? 不可能在數(shù)據(jù)倉庫上進行，只能在操作型數(shù)據(jù)庫上進行，則此時將不得不由應(yīng)用本身來進行各數(shù)據(jù)庫間的協(xié)調(diào) ，在分布環(huán)境下尤其如此，這顯然會大大增加應(yīng)用的復(fù)雜度并增加許多額外開銷。 續(xù) ? 有時， ODS也可適當(dāng)保存少量的綜合數(shù)據(jù)。 何處實現(xiàn)這種處理？ ? 這種處理不適宜在 DW上進行 ? 建立 ODS的一個主要目的 ? 支持這類處理 ? 由于 ODS中的數(shù)據(jù)量遠(yuǎn)較 DW小，因此可迅速獲取決策信息，甚至達(dá)到秒級響應(yīng)。 圖示 Operational OLTP ODS ODS Application Data Warehouse DW Application 中間層次 ODS中的數(shù)據(jù)內(nèi)容 ? 兩類數(shù)據(jù) ? 一方面，它包含企業(yè)全局一致的、細(xì)節(jié)的、當(dāng)前或接近當(dāng)前的數(shù)據(jù)，可以進行全局在線操作型處理； ? 另一方面，它又是一種面向主題、集成的數(shù)據(jù)環(huán)境，且數(shù)據(jù)量較小，適合于輔助企業(yè)完成日常決策的數(shù)據(jù)分析處理。 在何處實現(xiàn)這些功能？ ? 方法 1：放到分散的 OLTP系統(tǒng)中去做 ? 不一定能得到每個部門的準(zhǔn)確的一致信息，需要進行部門間的協(xié)調(diào)配合，工作量會很大。 數(shù)據(jù)間的雙向映射關(guān)系 ? 為了實現(xiàn)企業(yè)級 OLTP，需要建立 ODS與OLTP數(shù)據(jù)環(huán)境間的雙向映射關(guān)系 ? 目的 ? 保持雙方數(shù)據(jù)的一致性 應(yīng)用 A 應(yīng)用 B 應(yīng)用 C 雙向映射關(guān)系示意圖 定義于OLTP環(huán)境中記錄系統(tǒng) 全局更新時應(yīng)反映到各環(huán)境中的記錄 記錄系統(tǒng)定義 參考表 分散的 OLTP數(shù)據(jù)環(huán)境 ODS數(shù)據(jù)環(huán)境 雙向映射關(guān)系所表達(dá)的兩方面 ? 一方面， ODS記錄系統(tǒng)定義表達(dá)的是ODS從操作型環(huán)境的數(shù)據(jù)抽取關(guān)系。但是，在ODS與 DW之間在如下方面仍然存在基本而重要的區(qū)別。 ? 一方面， ODS是一個全局系統(tǒng)，它在原來獨立的各個 DB基礎(chǔ)上建立了一個一致的、面向主題的數(shù)據(jù)環(huán)境，從而使原有的 DB系統(tǒng)得到改造，實現(xiàn)全局?jǐn)?shù)據(jù)的一致性 ? 另一方面， ODS一致的和完整的數(shù)據(jù)世界，將 DW和原有的 DB隔離， DW卸去數(shù)據(jù)集成、結(jié)構(gòu)轉(zhuǎn)換等一系列沉重負(fù)擔(dān)，使往 DW的數(shù)據(jù)追加通過 ODS進行從而變得異常簡單，大大簡化了 DW的數(shù)據(jù)傳輸接口及 DW管理數(shù)據(jù)的復(fù)雜度。 改造的本質(zhì) ? 以原有業(yè)務(wù)系統(tǒng)為有基礎(chǔ) ? 并非推翻原有的面向業(yè)務(wù)應(yīng)用的數(shù)據(jù)庫系統(tǒng)的數(shù)據(jù)模型，重建各數(shù)據(jù)庫系統(tǒng)。 ? ODS和 DW都有自己的數(shù)據(jù)源 ? ODS的數(shù)據(jù)源是原有分散的數(shù)據(jù)庫系統(tǒng)； ? ODS這個數(shù)據(jù)環(huán)境則作為 DW重要數(shù)據(jù)源。 （ 1）自頂向下的建設(shè)路線 ? 方法 ? 在建立 ODS過程中拋棄原有的 OLTP系統(tǒng)； ? 從全局的企業(yè)模式出發(fā)，重新建立起面向主題的企業(yè)全局的數(shù)據(jù)庫，即 ODS； ? 然后再從全局的數(shù)據(jù)庫系統(tǒng)出發(fā)，去改造原有的應(yīng)用系統(tǒng)，或者重新建立起企業(yè)的各級數(shù)據(jù)庫應(yīng)用系統(tǒng)。 實施步驟 1—建立企業(yè)模型 ? 了解 OLTP系統(tǒng)中的數(shù)據(jù)庫模式 ? 知道原有數(shù)據(jù)庫中有什么 ? 參考數(shù)據(jù)倉庫系統(tǒng)中的主題域 ? 商品，供應(yīng)商，顧客 ? 以這些主題域為基本主題域，建立起全局的面向主題的企業(yè)模型 企業(yè)模式 ? 商品（商品號，商品名，類別，供應(yīng)商號，供應(yīng)日期，供應(yīng)價，供應(yīng)量，售價，售出量，庫存量， ……） ? 供應(yīng)商（供應(yīng)商號，供應(yīng)商名，地址，電話，商品號，供