天翼終端經(jīng)營(yíng)分析系統(tǒng)交流(合稿)v03-文庫(kù)吧
2025-01-17 01:28 本頁(yè)面
【正文】 理過(guò)程的子功能模塊，以實(shí)現(xiàn)對(duì)數(shù)據(jù)的抽取，傳輸，轉(zhuǎn)換，校驗(yàn)，清洗，入庫(kù)，上傳等基礎(chǔ)功能。并通過(guò) WebService技術(shù)封裝為標(biāo)準(zhǔn)組件，以提供給 ETL調(diào)度引擎作為 Job進(jìn)行調(diào)度邏輯層： 以 ETL調(diào)度引擎為核心，以 SOA總線為基礎(chǔ)，通過(guò)引入 Job的概念，屏蔽了整個(gè) ETL處理過(guò)程中的多樣性和復(fù)雜性，并能靈活擴(kuò)展不同的數(shù)據(jù)處理流程，使不同的數(shù)據(jù)處理流程的定制和配置成為可能展現(xiàn)層： 通過(guò)可視化的前臺(tái)配置和監(jiān)控界面，實(shí)現(xiàn)對(duì) ETL處理過(guò)程的流程定制，處理環(huán)節(jié)的參數(shù)配置，不同數(shù)據(jù)接口的定義，不同數(shù)據(jù)來(lái)源的定義，各種轉(zhuǎn)換規(guī)則，清洗規(guī)則的定義，以及處理進(jìn)度和結(jié)果的實(shí)時(shí)監(jiān)控和查詢，并進(jìn)行出錯(cuò)狀態(tài)的告警和處理。 ETL前臺(tái)界面Webservice布局管理器 BPM管理器 屬性管理器 統(tǒng)計(jì)分析管理控制關(guān)系管理 數(shù)據(jù)校驗(yàn)管理 Etl中間層邏輯處理 (ETL調(diào)度 引擎、 SOA總線 )接口 API Etl中間層接口層DwrXml數(shù)據(jù) 對(duì)象 消息 類 日志 類 數(shù)據(jù) 類 控制 類 接口處理 中間層處理 應(yīng)用處理層展現(xiàn)層統(tǒng)計(jì)監(jiān)控 控制 總體界面 BPMN元數(shù)據(jù) 類ETL底層數(shù)據(jù)抽取 文件規(guī)整 數(shù)據(jù)校驗(yàn)FTP 轉(zhuǎn)換 入庫(kù) 數(shù)據(jù)上傳SQL調(diào)用 存儲(chǔ)過(guò)程調(diào)用其他數(shù)據(jù)處理模塊 17基于 IMC的系統(tǒng)展現(xiàn)解決方案 技術(shù)框架 IMC2提供一個(gè)商業(yè)智能信息的綜合展現(xiàn)平臺(tái)，可以快捷的整體或者部分模塊部署。它提供二次開(kāi)發(fā)接口，能夠根據(jù)項(xiàng)目實(shí)際擴(kuò)充功能，并且不影響平臺(tái)的獨(dú)立性。它提供 5種展現(xiàn)工具，滿足企業(yè)對(duì)信息獲取的不同層次需求。 IMC2實(shí)現(xiàn)項(xiàng)目實(shí)施和應(yīng)用開(kāi)發(fā)的定制化、個(gè)性化、模版化，使最終用戶能夠自己通過(guò)工具獲取所需數(shù)據(jù)，降低項(xiàng)目工作量，提高實(shí)施質(zhì)量。 Presentation Layer信息展現(xiàn) PL 信息展現(xiàn) PL 信息展現(xiàn) PL…Web Framework GraphicsBusiness Logic Layer信息展現(xiàn) BL 報(bào)表 BL 訪問(wèn) BL…數(shù)據(jù)中心Data Access LayerSQL MappingData Access， Data PoolingPlatform BCL For Java日志與異常處理For Java緩沖管理 局部動(dòng)態(tài)刷新技術(shù) 界面級(jí)業(yè)務(wù)邏輯導(dǎo)航和數(shù)據(jù)傳遞組件化界面動(dòng)態(tài)配置XML 組件標(biāo)準(zhǔn)定義，實(shí)現(xiàn)與后臺(tái)應(yīng)用組件和流程關(guān)聯(lián)和無(wú)縫集成 Interface18基于 IMC的系統(tǒng)展現(xiàn)解決方案（續(xù)） 報(bào)表 DIY報(bào)表模板庫(kù)指標(biāo)規(guī)則庫(kù)指標(biāo)設(shè)計(jì)器 模板設(shè)計(jì)器 報(bào)表設(shè)計(jì)器指標(biāo)結(jié)果庫(kù)數(shù)據(jù)源系統(tǒng)庫(kù)報(bào)表規(guī)則庫(kù)展現(xiàn)容器19基于 IMC的系統(tǒng)展現(xiàn)解決方案（續(xù)） 報(bào)表 DIY報(bào)表定義報(bào)表展現(xiàn)報(bào)表分析通過(guò) TWIMC自助報(bào)表簡(jiǎn)單定義規(guī)則報(bào)表，并能以多種圖形展現(xiàn)20基于 IMC的系統(tǒng)展現(xiàn)解決方案（續(xù)） 查詢 DIY? 數(shù)據(jù)來(lái)源于語(yǔ)義庫(kù)，通過(guò)鼠標(biāo)拖拽操作，自動(dòng)構(gòu)造SQL查詢? 支持單字段計(jì)算、組合字段計(jì)算? 可以對(duì)已有的查詢?cè)俅尾樵? 用戶可以自由獲取需要的臨時(shí)數(shù)據(jù)將任一字段拖到右邊輸出結(jié)果21基于 IMC的系統(tǒng)展現(xiàn)解決方案（續(xù)） 個(gè)性化展現(xiàn)拖拽式布局個(gè)性化定制內(nèi)容個(gè)性化定制22個(gè)性化展現(xiàn)門(mén)戶示例23天翼終端分析系統(tǒng)引入天翼終端分析系統(tǒng)引入 GIS技術(shù)技術(shù)n 什么是 GIS GIS即地理信息系統(tǒng)是解決空間問(wèn)題的工具、方法和技術(shù) ； 在功能上， GIS具有空間數(shù)據(jù)的獲取、存儲(chǔ)、現(xiàn)示、編輯、處理、分析、輸出和應(yīng)用等功能。n 為何引入 GIS216。 GIS是一種最直觀的數(shù)據(jù)組織、管理、展現(xiàn)方法；216。 終端的庫(kù)存、銷售和售后管理及客戶價(jià)值都具有很強(qiáng)的地理地域關(guān)系；216。 工作效率的提升和管理思維創(chuàng)新 “ 千言萬(wàn)語(yǔ)抵不上一張圖 ” ，通過(guò) GIS凝具各類信息，掌控全局。 通過(guò) GIS提供的空間維度與時(shí)間維度的漫游、放大、縮小，既可以掌控業(yè)務(wù)數(shù)據(jù)的全貌，又可以深入業(yè)務(wù)數(shù)據(jù)的細(xì)節(jié)，同時(shí)在了解局部細(xì)節(jié)的同時(shí)，掌控局部細(xì)節(jié)在整體中的位置。 24基于 TWGIS的數(shù)據(jù)處理解決方案空間數(shù)據(jù)引擎TWIMC統(tǒng)一展現(xiàn)平臺(tái)訪問(wèn)層應(yīng)用層中間層存儲(chǔ)層展現(xiàn)服務(wù) 地圖服務(wù) 數(shù)據(jù)服務(wù)渠道 GIS展示 終端銷售分布分析庫(kù)存分布分析KPI GIS展現(xiàn) 終端 F返修分布分析 終端銷售告警區(qū)域化管理 GIS基礎(chǔ)應(yīng)用 渠道基本信息管理 系統(tǒng)管理業(yè)務(wù)模塊 基礎(chǔ)模塊 維護(hù)人員安全管理決策人員 管理人員 渠道客戶經(jīng)理 應(yīng)用人員25終端銷售地理分布示例圖終端銷量大的區(qū)域26數(shù)據(jù)質(zhì)量問(wèn)題n 經(jīng)分系統(tǒng)展現(xiàn)的數(shù)據(jù)不準(zhǔn)確，與真實(shí)數(shù)據(jù)存在較大差距n 經(jīng)分系統(tǒng)的數(shù)據(jù)部分缺失n 經(jīng)分系統(tǒng)數(shù)據(jù)延遲，影響業(yè)務(wù)的正常運(yùn)轉(zhuǎn)建立完善的數(shù)據(jù)質(zhì)量管理平臺(tái)252。 管理元數(shù)據(jù)（業(yè)務(wù)元數(shù)據(jù)，技術(shù)元數(shù)據(jù)，管理元數(shù)據(jù)）252。 監(jiān)控接口數(shù)據(jù)252。 監(jiān)控?cái)?shù)據(jù)處理過(guò)程252。 監(jiān)控?cái)?shù)據(jù)結(jié)果？元數(shù)據(jù)與數(shù)據(jù)質(zhì)量管理（一）元數(shù)據(jù)與數(shù)據(jù)質(zhì)量管理（一）27源系統(tǒng)接口文件 ODS層 DW層 展現(xiàn)層 上報(bào)文件對(duì)接口及時(shí)性、記錄波動(dòng)率進(jìn)行監(jiān)控告警ETL過(guò)程異常監(jiān)控 核心指標(biāo)波動(dòng)監(jiān)控（與上周期比、數(shù)據(jù)范圍超出）定時(shí)告警上報(bào)接口完成狀況每月下旬測(cè)算當(dāng)月核心指標(biāo)月值，利用月末幾日對(duì)當(dāng)月日接口數(shù)據(jù)進(jìn)行修訂正常接口上傳失敗，啟用替代文件上傳，同時(shí)分析替代數(shù)據(jù)影響，后期逐步回歸真實(shí)實(shí)時(shí)監(jiān)控?cái)?shù)據(jù)處理流程日月一致性調(diào)整替代方案元數(shù)據(jù)
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號(hào)-1