【正文】 點(diǎn) 對(duì)源系統(tǒng)的要求 方案一 使用 ETCL 工具直接到源系統(tǒng)的數(shù)據(jù)庫中抽取數(shù)據(jù) 時(shí)間最長， ETCL 流程復(fù)雜，但不需要源系統(tǒng)導(dǎo)出數(shù)據(jù) 源系統(tǒng)在安全性上必須允許數(shù)據(jù)倉庫系統(tǒng)抽取數(shù)據(jù) 方案二 增量數(shù)據(jù) 源系統(tǒng)導(dǎo)出增量數(shù)據(jù)文件，臨時(shí)存放在 ODS，再通過 ETCL 工具導(dǎo)入數(shù)據(jù)倉庫中 ETCL 的數(shù)據(jù)量較少，系統(tǒng)消耗時(shí)間較短 源系統(tǒng)能夠?qū)С鲈隽繑?shù)據(jù)文件 全部數(shù)據(jù) 源系統(tǒng)導(dǎo)出全部數(shù)據(jù)文件，臨時(shí)存放在 ODS，再通過 ETCL 工具導(dǎo)入數(shù)據(jù)倉庫中 ETCL 的數(shù)據(jù)量較大，系統(tǒng)消耗時(shí)間較長 源系統(tǒng)能夠?qū)С鋈繑?shù)據(jù)文件 方案三 源系統(tǒng)根據(jù)數(shù)據(jù)倉庫的要求對(duì)數(shù)據(jù)進(jìn)行轉(zhuǎn)換清洗后，數(shù)據(jù)倉庫直接對(duì)轉(zhuǎn)換清洗過的數(shù)據(jù)進(jìn)行抽取 時(shí)間最短，但對(duì)源系統(tǒng)的要求較高，因此該方案很少使用 源系統(tǒng)能夠根據(jù)數(shù)據(jù)倉庫的要求轉(zhuǎn)換清洗數(shù)據(jù) 方案四 對(duì)于無法進(jìn)行抽取的數(shù)據(jù)，要人工補(bǔ)錄 時(shí)間長短取決于補(bǔ)錄數(shù)據(jù)量大小 對(duì)于一些只有紙質(zhì)記錄的數(shù)據(jù)經(jīng)常會(huì)采用此方案 實(shí)際環(huán)境中根據(jù)業(yè)務(wù)系統(tǒng)情況，靈活選擇抽取方案。在 Cognos 技術(shù)方案中采用 Cognos FrameWork Manager 作為統(tǒng)一的元數(shù)據(jù)模型設(shè)計(jì)和管理工具，開發(fā)人員通過圖形化的界面，就可以對(duì)多數(shù)據(jù)源進(jìn)行描述，并且能夠同時(shí)描述 DB， MOLAP, ROLAP 等各種數(shù)據(jù)源。 Cognos Report Studio 還提供了強(qiáng)大的儀表盤，多媒體報(bào)表，地圖報(bào)表等各種報(bào)表報(bào)告功能。通過 Report Studio 可以制作各種固定格式的報(bào)表報(bào)告等，通過 Query Studio 用戶可以方便的進(jìn)行自助式報(bào)表的制作。 頁面填報(bào)，用戶通過在門戶上打開填報(bào)報(bào)表頁面進(jìn)行填報(bào)，填報(bào)好之后，系統(tǒng)將用戶填報(bào)的數(shù)據(jù)生成數(shù)據(jù)文本，通過 ETL 工具導(dǎo)入數(shù)據(jù)庫中。 在 Cognos 解決方案中，此部分操作由 ETL 工具 Cognos DataManager 具有強(qiáng)大的數(shù)據(jù)規(guī)整功能，同時(shí)它也可以通過調(diào)用數(shù)據(jù)庫中的各種規(guī)整函數(shù)來完成來完成。對(duì)多種數(shù)據(jù)源的訪問，包括非關(guān)系型數(shù)據(jù)庫和大型主機(jī)，成為基本的技術(shù)指標(biāo)。 集中數(shù) BI 系統(tǒng) 數(shù)據(jù)庫在整體解決方案為展現(xiàn)提供數(shù)據(jù)基礎(chǔ)，它是系統(tǒng)存儲(chǔ)、管理數(shù)據(jù)和信息的地方。通常的 BI 工具，如 BO,等沒有 企業(yè)級(jí)的 OLAP Server,都需要在數(shù)據(jù)庫中對(duì)數(shù)據(jù)進(jìn)行大量的粒度整合工作，如將用戶可能訪問的各種匯總組合的結(jié)果生成中間表存放在數(shù)據(jù)庫中，甚至需要按照用戶的報(bào)表要求，將報(bào)表結(jié)果直接整合好存放在數(shù)據(jù)庫中間表中，對(duì)數(shù)據(jù)粒度整合的要求高。 在 Cognos 技術(shù)方案中，如果業(yè)務(wù)數(shù)據(jù)沒有整合，可選擇使用 Cognos ETL 工具為Cognos Data Manager， Cognos DataManager 提供了直觀的可視化設(shè)計(jì)界面，設(shè)計(jì)人員通過鼠標(biāo)拖拽，屬性設(shè)置等操作就可以完成各種復(fù)雜的數(shù)據(jù)整合，清洗，加載等工作。 服務(wù)器部署示意圖： 各業(yè)務(wù)系統(tǒng)數(shù)據(jù)以及文本文件通過抽取加載到集中數(shù)據(jù)庫中，用戶請(qǐng)求通過網(wǎng)絡(luò)防火墻，提交到應(yīng)用服務(wù)器負(fù)載環(huán)境，應(yīng)用服務(wù)器訪問集中數(shù)據(jù)庫以及各業(yè)務(wù)系統(tǒng)數(shù)據(jù)。 模型層： 模型層包含了元數(shù)據(jù)模型和 OLAP 模型。我們?cè)谠O(shè)計(jì)過程中以對(duì) XXXXX 系統(tǒng)需求的初步分析為基準(zhǔn)，結(jié)合了自己的經(jīng)驗(yàn)，給出合理、可行、可擴(kuò)充的方案?？梢蕴峁┠K、報(bào)表、數(shù)據(jù)等各個(gè)層次的安全性和權(quán)限控制。 Cognos OLAP 分析， Cognos 報(bào)表展現(xiàn)等服務(wù)都提供了智能的負(fù)載均衡和容錯(cuò)功能。企業(yè)內(nèi)部和外部的所有類型用戶無需經(jīng)過培訓(xùn)都可以通過 Web 訪問、察看、打印報(bào)表。單一的元數(shù)據(jù)模型可以橫跨所有企業(yè)數(shù)據(jù)源和 BI 應(yīng)用程序，可以在整個(gè)企業(yè)范圍內(nèi)提供準(zhǔn)確、一致的數(shù)據(jù)視圖。 DataManager 完全自動(dòng)化的維度管理功能包括檢查漸變屬性的屬性、給業(yè)務(wù)主鍵設(shè)置代理以及諸如有效日期和當(dāng)前指標(biāo)等自動(dòng)化屬性。條件型事件可以根據(jù)存在的被拒記錄、一周中的特定一天或者流程中所碰到的錯(cuò)誤等情況對(duì)處理路徑進(jìn)行控制。與源控制系統(tǒng)功能的繼承可以讓用戶在進(jìn)行開發(fā)時(shí)鎖定組件。這些流程包括代理和維度歷史管理，支持漸變維度和有效的日期時(shí)間戳。 DataManager 引擎的中心是一個(gè)維度框架結(jié)構(gòu)，它可以將一致的主題型數(shù)據(jù)集市組織成一個(gè)完整企業(yè)數(shù)據(jù)倉庫的一部分。 強(qiáng)大并且易于使用 DataManager 可以簡(jiǎn)化 IT 部門的數(shù)據(jù)抽取、轉(zhuǎn)換和加載工作。它對(duì)所有的數(shù)據(jù)源提供唯一地點(diǎn)來定義元數(shù)據(jù)和業(yè)務(wù)規(guī)則，定義描述用戶業(yè)務(wù)特征的信息目錄，創(chuàng)建數(shù)據(jù)集市或數(shù)據(jù)倉庫，形成數(shù)據(jù)中心。他為用戶提供了企業(yè)不同指標(biāo)之間的橫向關(guān)聯(lián)信息，同一指標(biāo)的縱向分析信息。并且可以將查詢的定義和結(jié)果通過點(diǎn)擊鼠標(biāo)實(shí)現(xiàn)發(fā)布，與其他用戶進(jìn)行共享?？梢酝ㄟ^鼠標(biāo)拖拽方式將包括聲音，視頻，圖形，表格，文字，關(guān)系型數(shù)據(jù)庫內(nèi)容， OLAP 等任何有用的信息集成在報(bào)表中。同時(shí)具有足夠的靈活性，支持手工自定義層次和節(jié)點(diǎn)，支持維度中不同層次節(jié)點(diǎn)之間的計(jì)算，支持指標(biāo)層次靈活設(shè)計(jì) .不僅如此， Cognos 的 OLAP 模型設(shè)計(jì)具有簡(jiǎn)易的界面，開發(fā)人員只需要在友好的圖形化界面中通過鼠標(biāo)托拽就能實(shí)現(xiàn)各種 OLAP 模型的設(shè)計(jì)，不需要編寫程序。提供對(duì)元數(shù)據(jù)的定制和管理以及安全性控制等相關(guān)控制。增加了項(xiàng)目的整體成本。能夠大大提高系統(tǒng)的整體效率。只要遇到稍微復(fù)雜的報(bào)表就需要編寫代碼，比如常見的中國式非平衡表頭報(bào)表，地圖報(bào)表，報(bào)表的上鉆下鉆，穿透鉆取 等大量非常實(shí)用的功能。 在 Cognos 產(chǎn)品中用戶直接在瀏覽器中通過鼠標(biāo)拖拽就能夠方便的完成中國式的非平衡表頭報(bào)表，能夠支持保留報(bào)表格式的報(bào)表格式的上鉆下鉆，直接鼠標(biāo)拖拽就能完成地圖報(bào)表，允許用戶在地圖上鉆取，地圖和數(shù)據(jù)的關(guān)聯(lián)。只是通過在門戶實(shí)現(xiàn)集成。 元數(shù)據(jù)層： Cognos 產(chǎn)品所有應(yīng)用功能采用統(tǒng)一的元數(shù)據(jù)模型訪問數(shù)據(jù)，能夠根據(jù)數(shù)據(jù)源的增加，進(jìn)行統(tǒng)一的擴(kuò)展。同時(shí) Cognos 的 OLAP 轉(zhuǎn)換工具通過元數(shù)據(jù)描述可以將數(shù)據(jù)庫中數(shù)據(jù)按照業(yè)務(wù)主題的角度，指標(biāo)等因素，轉(zhuǎn)換成文件型的多維立方體。 數(shù)據(jù)層 數(shù)據(jù)源 這一層是后續(xù)所有步驟的數(shù)據(jù)來源，數(shù)據(jù)庫層包括了用戶的數(shù)據(jù)，以及系統(tǒng)相關(guān)信息的數(shù)據(jù)。當(dāng)其中一個(gè) Dispatcher 無效了，那么提交給他的請(qǐng)求會(huì)被路由到其他的Dispatcher。 Web Server 層 Web Server 層中包含了 Cognos 8 的 Gateway. Gateway 是對(duì) Web Server 的擴(kuò)展，負(fù)責(zé)將瀏覽器層的請(qǐng)求傳遞到下一層 (應(yīng)用服務(wù)層 )，也負(fù)責(zé)將應(yīng)用服務(wù)層的結(jié)果交給瀏覽器層。下面我們就詳細(xì)介紹 Cognos 產(chǎn)品技術(shù)方案，并將介紹組成該解決方案的各環(huán)節(jié)的產(chǎn)品： 產(chǎn)品介紹 Cognos 8 在一個(gè)產(chǎn)品中，一種 Web 構(gòu)架上，基于企業(yè)所有數(shù)據(jù)源，面向所有用戶提供完整的信息處理與展現(xiàn)功能，包括了即席分析功能，查詢功能，報(bào)表功能，儀表盤功能，事件管理功能以及 BI 管理等各種 BI 功能。在以后逐步加入其他部門集市的時(shí)候，可以共享這些維度，最后形成統(tǒng)一的數(shù)據(jù)倉庫。同時(shí)涉及東風(fēng)集團(tuán)內(nèi)部和外部三產(chǎn)公司等多家單位。但由于時(shí)間倉促，而且該項(xiàng)目尚未正式啟動(dòng)，我們還沒有機(jī)會(huì)進(jìn)行深入的需求調(diào)研和業(yè)務(wù)調(diào)研，因此我們對(duì) XXXXX 項(xiàng)目的一些理解以及對(duì)企業(yè)的業(yè)務(wù)理解可能會(huì)有偏差，還望諸位行業(yè)專家給與指正和幫助，對(duì)此我 們深表感激。 第三部分 Cognos 技術(shù)方案整體設(shè)計(jì) 結(jié)合 Cognos 產(chǎn)品和 XXXXX 具體的需求，構(gòu)建《 XXXXXBI 系統(tǒng)》 Cognos 技術(shù)方案；在這部分中，我們將探討 Cognos 技術(shù)方案整體體系結(jié)構(gòu)的設(shè)計(jì)步驟，詳細(xì)介紹其技術(shù)關(guān)鍵點(diǎn)，并給出 Cognos 技術(shù)方案在項(xiàng)目中部署模式建議。對(duì)于滿足財(cái)務(wù)公司的業(yè)務(wù)及時(shí)性需求，便于用戶進(jìn)行輔助決策支持，應(yīng)用系統(tǒng)需要為不同角色、不同視角的用戶提供不同條件的數(shù)據(jù)查詢和數(shù)據(jù)分析，由于業(yè)務(wù)量的不斷增加、原有的簡(jiǎn)單數(shù)據(jù)庫連接 SQL 方式的查詢無法滿足復(fù)雜查詢和需求變更帶來的復(fù)雜度，因此針對(duì)現(xiàn)有系統(tǒng)環(huán)境，非常有必要進(jìn)行整體數(shù)據(jù)庫查詢優(yōu)化、報(bào)表設(shè)計(jì)方式優(yōu)化，并基于優(yōu)化成果進(jìn)行符合財(cái)務(wù)公司業(yè)務(wù)發(fā)展的 BI 建設(shè)，其中包括數(shù)據(jù)集市報(bào)表系統(tǒng)、安全追溯系統(tǒng)、數(shù)據(jù)倉庫平臺(tái)系統(tǒng)、輔助決策支持系統(tǒng)、業(yè)務(wù)分析平臺(tái)系統(tǒng)。不僅其商業(yè)智能軟件產(chǎn)品系列在技術(shù)上長期穩(wěn)居領(lǐng)先地位，遙遙領(lǐng)先其他競(jìng)爭(zhēng)者，同時(shí) Cognos 提供數(shù)據(jù)倉庫整體解決方案，在業(yè)界內(nèi)也以高效、靈活、貼合業(yè)務(wù)需求、快速實(shí)現(xiàn)，高回報(bào)而著稱。 第五部分 Cognos 技術(shù)方案的實(shí)施過程 著眼于 Cognos 技術(shù)方案的實(shí)施過程，說明在實(shí)施過程中將會(huì)出現(xiàn)的問題和解決方法，在項(xiàng)目人員配置、項(xiàng)目進(jìn)度、資源規(guī)劃上給出建議，最后簡(jiǎn)要介紹了 Cognos 技術(shù)方案的一般開發(fā)流程。 初步需求分析 根據(jù)《 XXXXXBI 系統(tǒng)項(xiàng)目技術(shù)方案征集及軟件產(chǎn)品詢價(jià)書》中的內(nèi)容，我們初步了解了《 XXXXXBI 系統(tǒng)》的功能，結(jié)合實(shí)施項(xiàng)目的經(jīng)驗(yàn)，我們對(duì)項(xiàng)目的需求和問題進(jìn)行初步分析。 《 XXXXXBI 系統(tǒng)》 Cognos 產(chǎn)品技術(shù)建議 在上一節(jié)，我們對(duì)《 XXXXXBI 系統(tǒng)》進(jìn)行了初步的需求分析。使 XXXXX 集團(tuán)公司的各種報(bào)表，分析等前應(yīng)用擺脫訪問效率的困擾。 Cognos 8 結(jié)構(gòu)在邏輯上分了多層 ,包括了 : 瀏覽器層， Web Server 層，應(yīng)用服務(wù)層，數(shù)據(jù)層。 Cognos 支持的應(yīng)用服務(wù)器包括： Weblogic ， Websphere， Oracle AS， SAP NWAS，SAP J2EE Engine， Tomcat 等各種應(yīng)用服務(wù)器。結(jié)合通過從 Content Manager 中得到的元數(shù)據(jù)，權(quán)限等信息生成對(duì)應(yīng)的結(jié)果?？梢愿鶕?jù)項(xiàng)目需要，綜合效率、存儲(chǔ)空間、硬件條件等條件進(jìn)行靈活配置。 Cognos 產(chǎn)品主要優(yōu)勢(shì) Cognos 作為全球第一個(gè)第三代的 BI 產(chǎn)品，相比較于其他的第二代的 BI 產(chǎn)品，就有明顯的優(yōu)勢(shì) 完全可擴(kuò)展的體系結(jié)構(gòu) Cognos 作為全球第一個(gè)第三代的 BI 產(chǎn)品，采用了 SOA 的體系構(gòu)架，通過統(tǒng)一的服務(wù)，在統(tǒng)一構(gòu)架下為用戶提供了完整的 BI 功能，整個(gè)系統(tǒng)分為清晰的層結(jié)構(gòu)?？梢造`活的增加服務(wù)。實(shí)際上第二代的 BI 產(chǎn)品從其結(jié)構(gòu)上就制約了系統(tǒng)的靈活擴(kuò)展。這些功 能都充分體現(xiàn)了 Cognos 產(chǎn)品的在實(shí)現(xiàn)端對(duì)端解決方案時(shí)的產(chǎn)品實(shí)現(xiàn)的深度。而其他的第二代 BI 產(chǎn)品往往需要客戶端安裝客戶端，插件或 Applet. 完全純?yōu)g覽器方式和插件方式對(duì)比如下： 客戶端插件 純?yōu)g覽器方式 安全性 防火墻 防火墻需要開放端口，安全級(jí)別低 無需防火墻開放特殊端口，安全級(jí)別高 黑客攻擊 機(jī)制上不可避免插件漏洞，黑客攻擊 從機(jī)制上避免漏洞和黑客攻擊 沖突 和其他瀏覽器插件沖突，導(dǎo)致插件不能安裝， 不存在沖突問題 數(shù)據(jù)安全性 數(shù)據(jù)從服務(wù)器上下載到插件中處理，數(shù)據(jù)脫離服務(wù)器，沒有安全性 服務(wù)器集中處理，數(shù)據(jù)安全 網(wǎng) 帶寬 大量明細(xì)數(shù)據(jù)從服務(wù)器下載到插 網(wǎng)絡(luò)上只傳輸結(jié)果，網(wǎng)絡(luò)帶寬占絡(luò) 占用 件中，用戶并發(fā)造成網(wǎng)絡(luò)阻塞 用小，能夠使應(yīng) Inter 應(yīng)用 維護(hù) 環(huán)境適應(yīng)性 理論上不需要維護(hù)，實(shí)際使用中需要針對(duì)用戶的不同使用環(huán)境進(jìn)行維護(hù) 真正零安裝，零維護(hù) OLAP Server Cognos 作為全球領(lǐng)先的 BI 產(chǎn)品提供商，其產(chǎn)品提供了專業(yè)的 OLAP Server。這樣又造成數(shù)據(jù)庫中中間表數(shù)量急劇膨脹。 而很多第二代的 BI 產(chǎn)品本身并沒有負(fù)載均衡功能，職能依靠硬件，操作系統(tǒng)或 Web Server提供的負(fù)載均衡功能，不能實(shí)現(xiàn)跨平臺(tái)的負(fù)載均衡，難以適應(yīng)用戶應(yīng)用的擴(kuò)展。 Cognos OLAP Modeling OLAP Modeling 是 Cognos 提供的企業(yè)級(jí) OLAP 服務(wù)器，它將從各類數(shù)據(jù)源（數(shù)據(jù)庫、數(shù)據(jù)倉庫、平面文件）中精心篩選出來的 ―黃金 ‖數(shù)據(jù)創(chuàng)建成稱為 PowerCubes 的多維數(shù)據(jù)立方體。 Cognos BI OLAP Modeling 特點(diǎn) 友好的開發(fā)界面 高速的多維立方體創(chuàng)建 支持時(shí)間分區(qū)的虛擬 Cube 技術(shù) 支持增量更新 支持全方位的權(quán)限控制 異構(gòu)數(shù)據(jù)源處理能力 高數(shù)據(jù)壓縮比 Cognos Report Studio Report Studio 是專業(yè)的報(bào)表展現(xiàn)工具。報(bào)表設(shè)計(jì)好之后可以批量生成，也可以通過用戶交互條件生成，甚至基于時(shí)間以及事件等進(jìn)行調(diào)度，也可以通過 Email 等方式主動(dòng)推送給用戶。用戶只需要在 Web 界面中通過簡(jiǎn)單的鼠標(biāo)拖拽等操作，就可以進(jìn)行各 種 OLAP 分析，如上鉆，下鉆，切片，旋轉(zhuǎn)，切塊等，另外， Cognos Analysis Studio 可以同時(shí)支持 MOLAP和 ROLAP，支持圖表一起展現(xiàn)和圖表聯(lián)動(dòng)，支持柱圖，餅圖，折線圖，堆積圖，面積圖，散點(diǎn)圖等各種二維、三維圖形，支持用戶自定義子集功能， 支持同比，環(huán)比，百分比等各種比例分析，支持 TOP N/ Bottom N 分析，支持 2/8 分析，支持壓縮零。 Cognos Connection Cognos Connection 是 Cognos 門戶，提供信息的集成和用戶訪問的統(tǒng)一入口。這種數(shù)據(jù)集市既可是關(guān)系型的數(shù)據(jù)庫表也可是多維數(shù)據(jù)結(jié)構(gòu)存儲(chǔ)的數(shù)據(jù)立方