【正文】 咨詢廠商 信息提供商 …… 省分系統(tǒng) 圖例 邏輯庫 物理庫 數(shù)據(jù)流 控制流 數(shù)據(jù)整合與存儲 DW/DM ODS Cloudi（資源） 統(tǒng)一 IaaS服務接口 數(shù)據(jù)服務 數(shù)據(jù)管控 數(shù)據(jù)應用 開發(fā)平臺 標準化API 分析 模型 SDK …… 工具 軟件 數(shù)據(jù)獲取 非結構化數(shù)據(jù) 企業(yè)內部用戶 企業(yè)外部客戶 21. 169。 19. 169。 Cloud以數(shù)據(jù)為核心向上提供標準的封裝服務，以業(yè)務 (流程 )解耦為前提支撐生產經營、數(shù)據(jù)加工分析等應用。具體交換周期模式可以是實時、準實時和分批交換 b. 大數(shù)據(jù)平臺的數(shù)據(jù)整合策略是根據(jù)業(yè)務需求，按照數(shù)據(jù)模型定義和數(shù)據(jù)存儲周期的要求，集成生產系統(tǒng)中所需的部分私有數(shù)據(jù)和共享數(shù)據(jù)，而不是全部獲取和集成 c. 生產系統(tǒng)的共享數(shù)據(jù)集（ SID）盡管是數(shù)據(jù)中心業(yè)務職能管轄范圍，但 SID不屬于大數(shù)據(jù)平臺的管轄范圍，只是大數(shù)據(jù)平臺中的一個數(shù)據(jù)源，且 SID與大數(shù)據(jù)平臺的數(shù)據(jù)交換是雙向的 數(shù)據(jù)讀取 數(shù)據(jù) 交換 數(shù)據(jù) 交換 18. 169。 2. 數(shù)據(jù)交換 1. 一般情況下， D域中的分析類應用系統(tǒng)中不單獨存儲數(shù)據(jù)，系統(tǒng)所需的和系統(tǒng)產生的數(shù)據(jù)都存放在數(shù)據(jù)平臺的數(shù)據(jù)集市中。直接相關可以從流程和數(shù)據(jù)兩方面考察，一系列連續(xù)業(yè)務活動，使用相同數(shù)據(jù)的應用功能直接相關（耦合度高），如結算中的話單數(shù)、成本查詢，需要放在結算系統(tǒng)。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 大數(shù)據(jù)平臺與周邊系統(tǒng)的關系 大數(shù)據(jù)平臺與省分系統(tǒng)和總部系統(tǒng)的關系主要體現(xiàn)在功能分工協(xié)作和數(shù)據(jù)交換兩大方面，此處將大數(shù)據(jù)平臺作為一個黑盒子，重點關注數(shù)據(jù)平臺與外部系統(tǒng)的關系。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 大數(shù)據(jù)平臺應具備的技術支撐能力 10 9 6 2 數(shù)據(jù)捕獲 數(shù)據(jù)服務 大數(shù)據(jù)產生 知識沉淀 數(shù)據(jù)消亡 1. 清晰的整合層次和加工時效 2. 海量數(shù)據(jù)、非結構化數(shù)據(jù)、實時流數(shù)據(jù)等多樣化的存儲與管理 3. Gartner于 2023年 7月提出大數(shù)據(jù)管理中：“列式存儲數(shù)據(jù)庫、云計算和內存數(shù)據(jù)庫在未來 5年內將是 3個最重要的技術” 數(shù)據(jù)價值 1 0 4 數(shù)據(jù)整合 3 數(shù)據(jù)處理 14 業(yè)務信息 8 系統(tǒng)支撐 5 數(shù)據(jù)分析 11 數(shù)據(jù)冷卻 13 數(shù)據(jù)歸檔 12 近線存儲 7 數(shù)據(jù)展示 大數(shù)據(jù)生命周期 時間 大數(shù)據(jù)平臺將借助云計算的快速可擴展性、標準化服務、自助服務等特征，強化大數(shù)據(jù)的獲取、處理、整合、分析、服務等技術支撐能力，促進敏捷化、個性化的數(shù)據(jù)應用開發(fā)，最終助力 IT對業(yè)務轉型的推動。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 前期初步確立的大數(shù)據(jù)平臺目標技術架構 目標架構： 擁抱互聯(lián)網、運用云計算技術，建立開放的基于 SOA架構的中國企業(yè)集中化云數(shù)據(jù)服務支撐平臺，面向全國各級經營主體和總部集中平臺提供大數(shù)據(jù)、分布式、實時智能數(shù)據(jù)服務支撐與客戶響應，并注重公共數(shù)據(jù)、公共能力的一點沉淀與全網共享，實現(xiàn)基于特定對象、特定需求的個性化自主定制、靈活組件組裝，高效實現(xiàn)一級系統(tǒng)多維應用多級支撐 總部目標集中生產系統(tǒng) 應用 統(tǒng)一訪問門戶 透明管控 科學運營 價值創(chuàng)造 生產類應用 SaaS（軟件） 中間件 即服務 業(yè)務 即服務 ESB BPM 組件集 1 … … 組件集 2 … 組件集 3 報表 工具 聯(lián)機分 析工具 挖掘 工具 PaaS（平臺） 數(shù)據(jù) 即服務 DW 分析類數(shù)據(jù) 生產類數(shù)據(jù) ODS/MDM 統(tǒng)一 IaaS服務接口 小型機 X86服務器 高端存儲 中低端存儲 網絡資源 IaaS（資源） … SDK開發(fā)平臺 生命周期 管控 數(shù)據(jù) 質量 管控 數(shù)據(jù) 安全 管控 元數(shù)據(jù) 管控 指標體系 統(tǒng)一視圖 CUBE 開發(fā) 工具 近線區(qū) 歸檔 ETL 元 數(shù) 據(jù) ? 圍繞三個維度： 透明管控、科學運營、價值創(chuàng)造 ? 強調開放靈活： 基于開放業(yè)務組件、應用開發(fā)平臺、公共應用模型等構建，靈活支撐個性化應用開發(fā)、部署和推廣 ? 實施五項管控： 數(shù)據(jù)模型與標準、數(shù)據(jù)質量、數(shù)據(jù)安全、元數(shù)據(jù)、數(shù)據(jù)生命周期 ? 推行五個一點： 一點源頭采集、一點加工轉換、一點存儲、一點分析挖掘、一點服務提供 數(shù)據(jù)模型 標準管控 15. 169。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 大數(shù)據(jù)平臺關鍵能力需求 —— 更直接的決策支持 未來大數(shù)據(jù)平臺 當前 BI系統(tǒng) 1. 結構化決策：庫存控制 2. 半結構化決策：套餐設計 3. 非結構化決策：產品外觀設計 鴻 溝 知識庫 (事實知識、規(guī)則知識、案例知識 ) OLAP應用 數(shù)據(jù)挖掘應用 固定報表應用 靈活查詢應用 數(shù)字儀表板 知識庫 (事實性知識 ) DWD DWA ODS 最優(yōu)解 績效度量 數(shù)據(jù)挖掘 模型 輸入 參數(shù) 1. 模型的建立基亍預先假設 2. 模型所需數(shù)據(jù)事先確定已知 3. 模型是靜態(tài)的 ?模型的數(shù)學形式很完善，但往往丌能符合實際業(yè)務情況 仿真模型 隨機輸入量 終端 補充量 Q 輸入參數(shù) 績效變量 約束條件 決策計劃 目標 函數(shù) DWD DWA ODS DM DM DM 非結構化數(shù)據(jù) 仿真模型 優(yōu)化 模型 13. 169。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 大數(shù)據(jù)平臺能力需求分析 —— 分析類業(yè)務活動 業(yè)務理解 數(shù)據(jù)理解 數(shù)據(jù)準備 模型部署 數(shù)據(jù)建模 1. 分析類活動是通過對數(shù)據(jù)的深入分析，力求取得更深刻業(yè)務洞察的過程，參考 DMCRISP數(shù)據(jù)挖掘方法論，包括業(yè)務理解、數(shù)據(jù)理解、數(shù)據(jù)準備、數(shù)據(jù)建模、模型評估和模型部署六個步驟 產生 應用 獲取 整合 服務 歸檔 應用 整合 應用 服務 獲取 整合 歸檔 整合 服務 應用 歸檔 獲取