【正文】 、數(shù)據(jù)整合與存儲(chǔ)區(qū)域，保證未來應(yīng)用對(duì)數(shù)據(jù)操作的可擴(kuò)展，以及屏蔽了應(yīng)用對(duì)底層數(shù)據(jù)直接訪問的數(shù)據(jù)服務(wù)加以實(shí)現(xiàn)。同時(shí)基于云計(jì)算的彈性擴(kuò)展和虛擬化技術(shù)實(shí)現(xiàn)系統(tǒng)組件與基礎(chǔ)設(shè)施的解耦。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 大數(shù)據(jù)平臺(tái)能力需求分析 —— 決策類業(yè)務(wù)活動(dòng) 識(shí)別問題或 對(duì)決策的要求 分析和闡明方案 做出選擇 追蹤和反饋決策結(jié)果 傳達(dá)和執(zhí)行決策 1. 決策就是為達(dá)到某一目標(biāo)而在若干個(gè)可行方案經(jīng)過分析、比較、判斷，從中選擇并賦予實(shí)施的過程據(jù)諾賓斯泰（ Robenstein）將決策過程定義為五個(gè)步驟 2. 大數(shù)據(jù)平臺(tái)的核心是數(shù)據(jù)，從數(shù)據(jù)生命周期看，大數(shù)據(jù)的生成、獲取、整合、服務(wù)、應(yīng)用、歸檔各個(gè)步驟分別有著不同的目標(biāo)，并面臨不同的問題 3. 從決策類活動(dòng)過程和數(shù)據(jù)生命周期兩個(gè)維度，對(duì)大數(shù)據(jù)平臺(tái)的決策類活動(dòng)的支撐能力需求進(jìn)行分析 產(chǎn)生 應(yīng)用 獲取 整合 服務(wù) 歸檔 應(yīng)用 整合 應(yīng)用 服務(wù) 獲取 整合 大數(shù)據(jù)的存儲(chǔ)和管理 海量數(shù)據(jù)的快速分析 海量數(shù)據(jù)的快速獲取 歸檔 整合 服務(wù) 應(yīng)用 歸檔 獲取 整合 服務(wù) 應(yīng)用 歸檔 獲取 服務(wù) 歸檔 快速的數(shù)據(jù)服務(wù)執(zhí)行 簡(jiǎn)便的數(shù)據(jù)服務(wù)使用 與生產(chǎn)系統(tǒng)在功能和數(shù)據(jù)分工上清晰合理 與生產(chǎn)系統(tǒng)的及時(shí)交互 決策執(zhí)行業(yè)務(wù)活動(dòng)中的數(shù)據(jù)支撐 10. 169。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 大數(shù)據(jù)平臺(tái)關(guān)鍵能力需求 —— 應(yīng)用開發(fā)與運(yùn)行 1. 當(dāng)前總部 BI系統(tǒng)的數(shù)據(jù)應(yīng)用需求包括業(yè)務(wù)部門的計(jì)劃性業(yè)務(wù)支撐需求和大量的臨時(shí)性支撐需求，以及 IT部門自身規(guī)劃中的計(jì)劃性支撐需求； 2. 省公司經(jīng)分系統(tǒng)也需要支撐來自業(yè)務(wù)部門和 IT部門的大量支撐需求，同時(shí)要完成集團(tuán)下發(fā)的 IT規(guī)范要求 3. 未來省公司數(shù)據(jù)集中后，大數(shù)據(jù)平臺(tái)將必須承擔(dān)省分公司和總部的全部數(shù)據(jù)應(yīng)用服務(wù)需求 省分公司當(dāng)前數(shù)據(jù)應(yīng)用需求 集團(tuán)總部當(dāng)前數(shù)據(jù)應(yīng)用需求 省公司經(jīng)分系統(tǒng) 總部 BI系統(tǒng) 業(yè)務(wù)部門 IT 部門 集團(tuán)領(lǐng)導(dǎo) IT部門 業(yè)務(wù)部門 集團(tuán)下發(fā)規(guī)范支撐需求 臨時(shí)支撐需求 計(jì)劃業(yè)務(wù)支撐需求 計(jì)劃 IT 支撐需求 臨時(shí)支撐需求 省公司領(lǐng)導(dǎo) 計(jì)劃業(yè)務(wù)支撐需求 計(jì)劃 IT支撐需求 1. 平臺(tái)開發(fā)方面：如何支撐急速增長(zhǎng)的數(shù)據(jù)應(yīng)用需求 2. 平臺(tái)執(zhí)行方面：如何保障海量大并發(fā)的數(shù)據(jù)訪問需求和海量數(shù)據(jù)處理的性能要求 大數(shù)據(jù)平臺(tái)將面臨兩大挑戰(zhàn) ? IT人力緊張 ? IT系統(tǒng)擴(kuò)容難 ? IT投入效益難保障 12. 169。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 3. 大數(shù)據(jù)平臺(tái)定位分析 ? IBM 大數(shù)據(jù)平臺(tái)解決方案 14. 169。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 基于技術(shù)架構(gòu)目標(biāo)，加入大數(shù)據(jù)平臺(tái)建設(shè)的驅(qū)動(dòng)力 分析類系統(tǒng)應(yīng)該建立多少數(shù)據(jù)庫(kù)，多少種數(shù)據(jù)庫(kù) 保證數(shù)據(jù)從省分及時(shí)向集團(tuán)提供準(zhǔn)確唯一數(shù)據(jù) 現(xiàn)存問題 在一個(gè)框架下有效支持 5級(jí)體系的個(gè)性化開發(fā)和共性開發(fā) 提供多種形式數(shù)據(jù)服務(wù)提供方式，并有效執(zhí)行 數(shù)據(jù)應(yīng)用 數(shù)據(jù)服務(wù) 數(shù)據(jù)交換采集 數(shù)據(jù)整合 數(shù)據(jù)存儲(chǔ) 數(shù)據(jù)管控 新興技術(shù) 流數(shù)據(jù)處理架構(gòu)和體系 桌面云管理技術(shù) IaaS 、 PaaS，SaaS， DaaS等云管理技術(shù) 內(nèi)容數(shù)據(jù)處理架構(gòu)和體系 提供多廠商、多系統(tǒng)的統(tǒng)一開發(fā)平臺(tái) …… …… 16. 169。 1. 海量數(shù)據(jù)的識(shí)別和快速裝入 2. 數(shù)據(jù)分布流轉(zhuǎn) 3. 互聯(lián)網(wǎng)數(shù)據(jù)和客戶行為捕獲 4. 實(shí)時(shí) /準(zhǔn)實(shí)時(shí)數(shù)據(jù)捕獲 1. 大量數(shù)據(jù)服務(wù)需求的快速開發(fā)支撐 2. 快速數(shù)據(jù)服務(wù)執(zhí)行 3. 簡(jiǎn)便的數(shù)據(jù)服務(wù)使用 4. 清晰的數(shù)據(jù)服務(wù)目錄 5. 數(shù)據(jù)服務(wù)使用記錄 1. 針對(duì)海量數(shù)據(jù)的高性能數(shù)據(jù)分析 2. 實(shí)時(shí)數(shù)據(jù)的即時(shí)分析 3. 非結(jié)構(gòu)化數(shù)據(jù)的智能分析（如網(wǎng)頁(yè)的標(biāo)引、結(jié)構(gòu)化解析，視頻、圖片的模式識(shí)別等） 4. 高級(jí)分析算法 1. 海量冷數(shù)據(jù)（包括實(shí)時(shí)、非結(jié)構(gòu)化、結(jié)構(gòu)化）的存儲(chǔ)和管理策略 2. 冷數(shù)據(jù)的透明訪問 3. 冷數(shù)據(jù)與熱數(shù)據(jù)的統(tǒng)一支撐 4. 操作型和分析型數(shù)據(jù)的統(tǒng)一歸檔 5. 快速的數(shù)據(jù)轉(zhuǎn)儲(chǔ)和歸檔 1. 數(shù)據(jù)的展現(xiàn)策略 2. 個(gè)性化應(yīng)用開發(fā)支撐 3. 共享應(yīng)用快速部署 4. 對(duì)外部系統(tǒng)的支撐 5. 信息提煉以及對(duì)業(yè)務(wù)的支撐 6. 知識(shí)的組織、沉淀、管理和應(yīng)用 17. 169。 大數(shù)據(jù)平臺(tái) 總部系統(tǒng) ADB SID 省分系統(tǒng) ADB SID 1. 功能分工與協(xié)作 a. 生產(chǎn)系統(tǒng)只保留與生產(chǎn)直接相關(guān)的、數(shù)據(jù)稽核（比對(duì)）相關(guān)的統(tǒng)計(jì)報(bào)表，其它全部整合到分析平臺(tái)上。 b. 不直接相關(guān)的統(tǒng)計(jì)、分析類應(yīng)用，由大數(shù)據(jù)平臺(tái)通過數(shù)據(jù)服務(wù)，并在 D域中統(tǒng)一建立應(yīng)用進(jìn)行支撐。其中如果系統(tǒng)使用的數(shù)據(jù)較少，可以部門 /省分?jǐn)?shù)據(jù)集市；但如果系統(tǒng)涉及的數(shù)據(jù)很多，則需存放在應(yīng)用集市中 a. 生產(chǎn)系統(tǒng)使用的數(shù)據(jù)全部存放在生產(chǎn)系統(tǒng)中，當(dāng)需要與大數(shù)據(jù)平臺(tái)發(fā)生共享數(shù)據(jù)時(shí)，則通過數(shù)據(jù)交換進(jìn)行。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 大數(shù)據(jù)平臺(tái)在 Cloud的位置 大數(shù)據(jù)平臺(tái) : ? 外圍關(guān)系：數(shù)據(jù)來源與生產(chǎn)系統(tǒng)的 ADB， SID等； ? 服務(wù)對(duì)象：數(shù)據(jù)應(yīng)用、反饋生產(chǎn)系統(tǒng)； ? 核心內(nèi)容：數(shù)據(jù)管理、數(shù)據(jù)組織、數(shù)據(jù)管控、數(shù)據(jù)服務(wù)； ? 承載關(guān)系： ? IaaS統(tǒng)一承載構(gòu)架； ? PaaS數(shù)據(jù)集與 SID和 ADB并列； ? PaaS技術(shù)服務(wù)集：互為補(bǔ)充； ? PaaS業(yè)務(wù)服務(wù)集：?jiǎn)为?dú)形成面向分析業(yè)務(wù)服務(wù)集； 大數(shù)據(jù)平臺(tái)針對(duì)異常復(fù)雜的大數(shù)據(jù)管理，而云計(jì)算為大數(shù)據(jù)管理提供了堅(jiān)實(shí)的技術(shù)支撐。概括的說，Cloud 是大數(shù)據(jù)平臺(tái)的載體，為其提供了基礎(chǔ)運(yùn)行環(huán)境。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 4. 大數(shù)據(jù)平臺(tái)總體架構(gòu)設(shè)計(jì) ? IBM 大數(shù)據(jù)平臺(tái)解決方案 20. 169。 Copyright IBM Corporation 2023 Airtel | IBM | Confidential Business Consulting Services 總體邏輯架構(gòu)圖 數(shù)據(jù)應(yīng)