數(shù)據(jù)倉(cāng)庫(kù)-系統(tǒng)設(shè)計(jì)說(shuō)明書(shū)(編輯修改稿)
2025-08-22 09:19 本頁(yè)面
【文章內(nèi)容簡(jiǎn)介】 體系圖中提到的“程序”，將相關(guān)的“運(yùn)行程序”分布到各個(gè)物理節(jié)點(diǎn)中；3） 采用網(wǎng)絡(luò)拓?fù)鋱D表示。 技術(shù)路線描述本軟件系統(tǒng)在實(shí)現(xiàn)過(guò)程中所采用的技術(shù)路線、方法。對(duì)較新的技術(shù)給予詳細(xì)的闡述及必要的說(shuō)明，在可能的情況下給出相應(yīng)的技術(shù)參考資料。3 系統(tǒng)接口設(shè)計(jì) 用戶接口無(wú)接口。4 子系統(tǒng)/模塊設(shè)計(jì) 數(shù)據(jù)倉(cāng)庫(kù) ODL(操作數(shù)據(jù)層)設(shè)計(jì) 功能描述實(shí)現(xiàn)從外部系統(tǒng)導(dǎo)入數(shù)據(jù)到大數(shù)據(jù)平臺(tái),ODL層數(shù)據(jù)與數(shù)據(jù)源保持一致.216。 同步方式包括:l 增量同步l 全量同步216。 數(shù)據(jù)源類型包括:l 數(shù)據(jù)庫(kù) 業(yè)務(wù)流程216。 流程圖:216。 流程說(shuō)明:1. 調(diào)度系統(tǒng)定時(shí)啟動(dòng)數(shù)據(jù)同步作業(yè).2. 作業(yè)讀取數(shù)據(jù)同步腳本,遠(yuǎn)程調(diào)用數(shù)據(jù)庫(kù)接口.3. 數(shù)據(jù)庫(kù)接口返回遠(yuǎn)程調(diào)用結(jié)果.4. 接收數(shù)據(jù)庫(kù)接口返回的數(shù)據(jù)集,裝載到ODL本地表.216。 異常處理:調(diào)度系統(tǒng)捕獲異常并處理216。 日志說(shuō)明:由調(diào)度系統(tǒng)負(fù)責(zé)記錄作業(yè)(正常和異常)日志.216。 數(shù)據(jù)源說(shuō)明:1. 通過(guò)視圖封裝需要同步的物理表, 與業(yè)務(wù)進(jìn)行隔離. 當(dāng)物理表發(fā)生變動(dòng),盡量通過(guò)修改視圖兼容. 2. 數(shù)據(jù)同步程序訪問(wèn)數(shù)據(jù)源視圖.216。 數(shù)據(jù)粒度說(shuō)明：與數(shù)據(jù)源保持完全一致。 作業(yè)設(shè)計(jì)詳見(jiàn) BDL(事物層)設(shè)計(jì) 功能描述BDL層對(duì)ODL數(shù)據(jù)進(jìn)行清洗、轉(zhuǎn)換，實(shí)現(xiàn)統(tǒng)一維度的數(shù)據(jù)整合。 業(yè)務(wù)流程216。 流程圖:216。 流程說(shuō)明:1. 調(diào)度系統(tǒng)定時(shí)啟動(dòng)數(shù)據(jù)同步作業(yè).2. 作業(yè)讀取ODL表，進(jìn)行數(shù)據(jù)清洗，對(duì)不符合規(guī)則的數(shù)據(jù)進(jìn)行丟棄或轉(zhuǎn)換.3. 將轉(zhuǎn)換后的結(jié)果數(shù)據(jù)裝載到BDL本地表.216。 異常處理:調(diào)度系統(tǒng)捕獲異常并處理.216。 日志說(shuō)明:由調(diào)度系統(tǒng)負(fù)責(zé)記錄作業(yè)(正常和異常)日志.216。 數(shù)據(jù)粒度說(shuō)明：與ODL保持一致. 作業(yè)設(shè)計(jì)詳見(jiàn) IDL(寬表層)設(shè)計(jì) 功
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1