數(shù)據(jù)倉庫-系統(tǒng)設(shè)計說明書(編輯修改稿)
2024-08-22 09:19 本頁面
【文章內(nèi)容簡介】 體系圖中提到的“程序”，將相關(guān)的“運行程序”分布到各個物理節(jié)點中；3） 采用網(wǎng)絡(luò)拓撲圖表示。 技術(shù)路線描述本軟件系統(tǒng)在實現(xiàn)過程中所采用的技術(shù)路線、方法。對較新的技術(shù)給予詳細的闡述及必要的說明，在可能的情況下給出相應(yīng)的技術(shù)參考資料。3 系統(tǒng)接口設(shè)計 用戶接口無接口。4 子系統(tǒng)/模塊設(shè)計 數(shù)據(jù)倉庫 ODL(操作數(shù)據(jù)層)設(shè)計 功能描述實現(xiàn)從外部系統(tǒng)導(dǎo)入數(shù)據(jù)到大數(shù)據(jù)平臺,ODL層數(shù)據(jù)與數(shù)據(jù)源保持一致.216。 同步方式包括:l 增量同步l 全量同步216。 數(shù)據(jù)源類型包括:l 數(shù)據(jù)庫 業(yè)務(wù)流程216。 流程圖:216。 流程說明:1. 調(diào)度系統(tǒng)定時啟動數(shù)據(jù)同步作業(yè).2. 作業(yè)讀取數(shù)據(jù)同步腳本,遠程調(diào)用數(shù)據(jù)庫接口.3. 數(shù)據(jù)庫接口返回遠程調(diào)用結(jié)果.4. 接收數(shù)據(jù)庫接口返回的數(shù)據(jù)集,裝載到ODL本地表.216。 異常處理:調(diào)度系統(tǒng)捕獲異常并處理216。 日志說明:由調(diào)度系統(tǒng)負責記錄作業(yè)(正常和異常)日志.216。 數(shù)據(jù)源說明:1. 通過視圖封裝需要同步的物理表, 與業(yè)務(wù)進行隔離. 當物理表發(fā)生變動,盡量通過修改視圖兼容. 2. 數(shù)據(jù)同步程序訪問數(shù)據(jù)源視圖.216。 數(shù)據(jù)粒度說明：與數(shù)據(jù)源保持完全一致。 作業(yè)設(shè)計詳見 BDL(事物層)設(shè)計 功能描述BDL層對ODL數(shù)據(jù)進行清洗、轉(zhuǎn)換，實現(xiàn)統(tǒng)一維度的數(shù)據(jù)整合。 業(yè)務(wù)流程216。 流程圖:216。 流程說明:1. 調(diào)度系統(tǒng)定時啟動數(shù)據(jù)同步作業(yè).2. 作業(yè)讀取ODL表，進行數(shù)據(jù)清洗，對不符合規(guī)則的數(shù)據(jù)進行丟棄或轉(zhuǎn)換.3. 將轉(zhuǎn)換后的結(jié)果數(shù)據(jù)裝載到BDL本地表.216。 異常處理:調(diào)度系統(tǒng)捕獲異常并處理.216。 日志說明:由調(diào)度系統(tǒng)負責記錄作業(yè)(正常和異常)日志.216。 數(shù)據(jù)粒度說明：與ODL保持一致. 作業(yè)設(shè)計詳見 IDL(寬表層)設(shè)計 功
環(huán)評公示相關(guān)推薦
鄂ICP備17016276號-1