數(shù)據(jù)倉庫的高校數(shù)據(jù)統(tǒng)計服務(wù)平臺研究教材(已修改)
2025-03-17 04:31 本頁面
【正文】 基于數(shù)據(jù)倉庫的高校數(shù)據(jù)統(tǒng)計服務(wù)平臺研究 提綱 ? ? ? ? ? 背景 需求分析 平臺設(shè)計 平臺實現(xiàn) 平臺部署 背景 ? 各高校建成的信息管理系統(tǒng)越來越多，海量數(shù)據(jù)背后隱藏著 許多重要信息，是學(xué)校正常運轉(zhuǎn)的核心資源，以靈活便捷的 方式對數(shù)據(jù)進行統(tǒng)計、分析，進而為高校管理與決策提供支 持的需求日益強烈 背景 ? 商業(yè)智能 (BI, business intelligence) ? Gartner Group, Howard Dresner, 1996：一類由 數(shù)據(jù)倉庫 (或數(shù)據(jù)集市 )、查詢報表、數(shù)據(jù)分析、數(shù)據(jù)挖掘、 數(shù)據(jù)備份和恢復(fù)等部分組成，以幫助企業(yè)決策為目的的技術(shù) 及其應(yīng)用。 背景 ? 微軟的 BI體系框架 背景 ? IBM的 BI體系框架 背景 ? 建立 BI系統(tǒng)的基本步驟包括： ? 確認(rèn)和解讀數(shù)據(jù)源； ? 進行數(shù)據(jù)采集和存儲管理； ? 構(gòu)建模型并在此基礎(chǔ)上分析數(shù)據(jù) 背景 ? 商業(yè)智能的基礎(chǔ)是數(shù)據(jù)倉庫 (DW , Data Warehouse) ? 數(shù)據(jù)倉庫是一個面向主題的、集成的、相對穩(wěn)定的、反映歷 史變化的數(shù)據(jù)集合。 ? 數(shù)據(jù)倉庫為有效地為 BI系統(tǒng)提供了全局一致的數(shù)據(jù)環(huán)境，也為歷 史數(shù)據(jù)綜合數(shù)據(jù)的處理提出了一種行之有效的解決方法。 背景 ? 國外 :BI應(yīng)用已經(jīng)進入了數(shù)據(jù)分析階段，有些已經(jīng)積累了高端的數(shù)據(jù) 挖掘經(jīng)驗； ? 國內(nèi) :BI的應(yīng)用則還停留在數(shù)據(jù)整合的初級階段，應(yīng)用的主要領(lǐng)域集 中在電信、保險、銷售等行業(yè)， ? 國內(nèi)高校的情況不容樂觀： ? 數(shù)據(jù)分散在不同的源系統(tǒng)中，數(shù)據(jù)的規(guī)范性和共享性還存在很大問題； ? 數(shù)據(jù)統(tǒng)計和分析基本上是基于單個系統(tǒng)中的操作型數(shù)據(jù)進行的，既不 能反映出不同系統(tǒng)之間的數(shù)據(jù)關(guān)聯(lián)，又缺乏對數(shù)據(jù)的全局把握；還會 因為操作型數(shù)據(jù)的動態(tài)性和分散性影響統(tǒng)計結(jié)果的準(zhǔn)確性，也無法對 歷史數(shù)據(jù)進行統(tǒng)計和分析。 背景 ? 要建立高校的 BI應(yīng)用，滿足為高校管理與決策提供支持的 需求，首先必須打破不同應(yīng)用系統(tǒng)之間的 “藩籬 ”，建立全 局一致的數(shù)據(jù)倉庫，將操作型數(shù)據(jù)轉(zhuǎn)換為靜態(tài)的、穩(wěn)定的、 規(guī)范化的、能夠反映歷史的分析型數(shù)據(jù)，然后在此基礎(chǔ)上搭 建統(tǒng)一的數(shù)據(jù)統(tǒng)計服務(wù)平臺。 需求分析 ? 數(shù)據(jù)統(tǒng)計需求按用途不同分為 2類： ? 一是以年報表或者季度報表的形式上報上級部門的統(tǒng)計數(shù)據(jù)，有 著固定的報表格式、復(fù)雜的報表內(nèi)容、專門的統(tǒng)計口徑，有的報 表甚至還有嚴(yán)格的填報流程； ? 二是部門日常所需要統(tǒng)計數(shù)據(jù)，往往和某種類型具體業(yè)務(wù)相關(guān)， 和第一類需求相比，統(tǒng)計數(shù)據(jù)的格式和內(nèi)容比較簡單，沒有復(fù)雜 的填報流程，但時間粒度要求更細(xì)，要以月報表、周報表乃至日 報表的形式提供統(tǒng)計結(jié)果，并且要求提供數(shù)據(jù)鉆取的功能。 需求分析 ? 這些需要統(tǒng)計的數(shù)據(jù)涉及高校人事、學(xué)生、科研、教學(xué)等各 個領(lǐng)域，每個領(lǐng)域下面又細(xì)分為了很多不同的細(xì)類，具體如 圖 1所示。 平臺設(shè)計 ? 總體架構(gòu) ? 數(shù)據(jù)倉庫建模 ? 統(tǒng)計數(shù)據(jù)模型 總體架構(gòu) ? 高校數(shù)據(jù)統(tǒng)計服務(wù)平臺由源系統(tǒng)、數(shù)據(jù)倉庫和統(tǒng)計平臺三部 分組成。 總體架構(gòu) ? 源系統(tǒng)： 高校業(yè)務(wù)涉及的數(shù)據(jù)源比較廣泛，主要有人事系統(tǒng)、 教務(wù)系統(tǒng)、研究生系統(tǒng)、科研系統(tǒng)等，再加上校園網(wǎng)之外的 一些其他外部數(shù)據(jù)源，構(gòu)成了數(shù)據(jù)統(tǒng)計服務(wù)平臺的數(shù)據(jù)基礎(chǔ)， 由于系統(tǒng)業(yè)務(wù)職能和具體需求不同，在實現(xiàn)時會選用不同的 數(shù)據(jù)庫，數(shù)據(jù)結(jié)構(gòu)也可能存在較大差異，從而導(dǎo)致數(shù)據(jù)間有 較大的異構(gòu)性和不一致性。 總體架構(gòu) ? 數(shù)據(jù)倉庫 ：數(shù)據(jù)倉庫全面接收源系統(tǒng)數(shù)據(jù)， ETL進程對數(shù)據(jù) 進行規(guī)范化、驗證、清洗，并最終裝載進入數(shù)據(jù)集市，通過 數(shù)據(jù)集市支持系統(tǒng)進行數(shù)據(jù)查詢、分析；整個數(shù)據(jù)倉庫包含 四大層次： ? 復(fù)制層 (SSA, system
環(huán)評公示相關(guān)推薦
鄂ICP備17016276號-1