freepeople性欧美熟妇, 色戒完整版无删减158分钟hd, 无码精品国产vα在线观看DVD, 丰满少妇伦精品无码专区在线观看,艾栗栗与纹身男宾馆3p50分钟,国产AV片在线观看,黑人与美女高潮,18岁女RAPPERDISSSUBS,国产手机在机看影片

正文內(nèi)容

dreambi大數(shù)據(jù)分析平臺-技術(shù)白皮書-wenkub.com

2024-10-24 08:38 本頁面
   

【正文】 如下圖: . 柯布 — 道格拉斯生產(chǎn)函 數(shù) 柯布 — 道格拉斯生產(chǎn)函數(shù)最初是美國數(shù)學(xué)家柯布 ()和經(jīng)濟學(xué)家保羅 . 決策分析 依據(jù)行業(yè)的數(shù)據(jù)特征,提供如決策樹模型、斯諾模型、線性回歸模型等常用的決策分析模型,實現(xiàn)對統(tǒng)計數(shù)據(jù)的決策分析。提供多種形式的報警,如傳統(tǒng)報警方式 ——改變數(shù)據(jù)字體、背景。 氣泡圖 3D 圖分析 氣泡圖劃分 同比分析 ? 趨勢分析 分析一個指標(biāo)在一定時間周期的變化趨勢,一般以折線圖方式顯示。 5) 報告發(fā)布 業(yè)務(wù)人員生成符合統(tǒng)計及業(yè)務(wù)需求的專 業(yè)報表,最后將報表保存為 HTML格式,然后通過所見即所得的網(wǎng)頁編輯器進行編輯,通過排版或者美化,并經(jīng)過審批,利用報告發(fā)布系統(tǒng)將其發(fā)布到內(nèi)外網(wǎng)站中。專題是針對某一個特定主題的所有報告內(nèi)容,段是專題中描述某一個段落;短語是一個段中存在相互關(guān)系的一些句子的組合;單元是報告模板的最小單位。而后由一個智能分析模塊根據(jù)中間表的數(shù)據(jù)在知識引導(dǎo)下生成報告大綱,最后依據(jù)報告大綱、中間表數(shù)據(jù)以及描述報告文本的模板,報告生成模塊生成報告文本、控制文本以及解釋文本。該子系統(tǒng)的功能覆蓋了目前大部分的手工報表功能。分析報表通常需要使用者來運行,對于得到的結(jié)果可以保存、瀏覽和打印。這類報表應(yīng)當(dāng)由系統(tǒng)批量產(chǎn)生,并根據(jù)預(yù)先設(shè)定的規(guī)則自動發(fā)送給相關(guān)接收者 (通過郵件 )。發(fā)布時要做相應(yīng)的權(quán)限控制。 6) 數(shù)據(jù)生成 在 ODS 基礎(chǔ)上建立報表集市,報表集市內(nèi)的數(shù)據(jù)來源是由報表類型決定的,對指標(biāo)型報表,通常是固定格式的報表,其內(nèi)的數(shù)據(jù)是根據(jù)業(yè)務(wù)要求,定期地對指標(biāo)對應(yīng)的事實表進行運算,計算各指標(biāo)值到相應(yīng)的報表集市;統(tǒng)計型報表,是從相關(guān)事實表進行匯總生成報表集市數(shù)據(jù);分析型報表,一部分可以采用與統(tǒng)計型報表相同的數(shù)據(jù)生成方式,另一部分可以借助數(shù)據(jù)立方體進行提取生成。實現(xiàn)任意選擇不同的指標(biāo)值查看匯總數(shù)據(jù),且能往下鉆取挖掘數(shù)據(jù),查看到每一條明細值。 1) 自由的選擇查詢項 2) 查詢條件的自由設(shè)置與任意組合,同時支持介于、屬于列表等條件設(shè)置。 ( 4)、支持對數(shù)據(jù)的上鉆、下鉆操作。 通過拖拽方式的可視化界面,實現(xiàn)數(shù)據(jù)的統(tǒng)計以及分類匯總 ( 1)、通過查詢模版設(shè)置與統(tǒng)計報表設(shè)置的結(jié)合,實現(xiàn)條件查詢、模糊查詢、組合查詢、關(guān)鍵字搜索。 ? 人工啟動: 用戶可以在 ETL 任務(wù)列表中,通過向?qū)铀x任務(wù),同時根據(jù)任務(wù)設(shè)置,提供相應(yīng)需要的文件以及設(shè)置系統(tǒng)參數(shù),如下圖: 根據(jù)向?qū)崾?,選擇需要需要導(dǎo)入的文件并上傳。 設(shè)置用戶在啟動 ETL 的時候,需要提交的參數(shù)。 ETL 任務(wù) 通過維護 ETL 任務(wù),設(shè)置 ETL 啟動的方式、數(shù)據(jù)導(dǎo)入順序、計劃時間、數(shù)據(jù)文件、系統(tǒng)參數(shù)、以及審核條件。 系統(tǒng)參數(shù) 通過該模塊,用戶可以維護在 ETL 過程中,需要用戶額外制定的數(shù)值變量,如數(shù)據(jù)源中沒有當(dāng)前月份,所屬區(qū)縣等信息的情況下,可以在系統(tǒng)參數(shù)中,進行設(shè)置。 ? MS SQLServer 服務(wù)器,網(wǎng)上直報系統(tǒng) v3。從分析質(zhì)量來看,及時可靠的分析數(shù)據(jù)影響著整個系統(tǒng)的準(zhǔn)確程度。 廣義說來, ETL 系統(tǒng)將貫穿整個 數(shù)據(jù)庫 的全過程。 ETL 系統(tǒng)按照預(yù)先定義的任務(wù)定時調(diào)度表,定期自動把各個業(yè)務(wù)系統(tǒng)的新增數(shù)據(jù)經(jīng)過轉(zhuǎn)換后,加載到 數(shù)據(jù)庫 。當(dāng)存在記錄重復(fù)情況時,需要定義如何處理重復(fù)的輸入數(shù)據(jù)的記錄副本(可以作為副本增加進去,也可以將其丟棄)。 . 數(shù)據(jù)裝載 向數(shù)據(jù)庫數(shù)據(jù)庫中轉(zhuǎn)移數(shù)據(jù)的過程中存在多種情況,一般存在三種類型的數(shù)據(jù)裝載: ? 初始裝載:第一次對所有的數(shù)據(jù)庫表進行遷移; ? 增量裝載:根據(jù)需要定期裝載應(yīng)用運行 過程中發(fā)生的變化; ? 完全刷新:完全刷新是指完全刷新一個或多個表的內(nèi)容,并重新裝載新的數(shù)據(jù)。這期間需要考慮數(shù)據(jù)庫中需要的數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)元素,結(jié)合源數(shù)據(jù)格式、數(shù)據(jù)取值和質(zhì)量要求可以知道如何綜合采用多種類型的轉(zhuǎn)換工作來符合數(shù)據(jù)庫的要求。首 先,所有抽取的數(shù)據(jù)必須轉(zhuǎn)換為數(shù)據(jù)庫可以使用的數(shù)據(jù)。在具體的抽取過程中,還必須根據(jù)是增量裝載工作還是初始完全裝載等不同情況的變化規(guī)劃抽取任務(wù)。 ETL 是企業(yè)數(shù)據(jù)質(zhì)量管理( DQM)的一個重要環(huán)節(jié), ETL 過程的質(zhì)量對數(shù)據(jù)庫的品 質(zhì)有極大影響。 ETL 子系統(tǒng)中數(shù)據(jù)轉(zhuǎn)換規(guī)則和數(shù)據(jù)映射規(guī)則需通過分析數(shù)據(jù)庫中的數(shù)據(jù)結(jié)構(gòu)和源系統(tǒng)中的數(shù)據(jù)結(jié)構(gòu)設(shè)計得出,并把這些規(guī)則存儲在元數(shù)據(jù)庫中。沒有這些功能,就沒有數(shù)據(jù)庫中的戰(zhàn)略信息。 ? 提供數(shù)據(jù)交換日志審計功能。 具體要求包括: ? 支持多種數(shù)據(jù)格式的數(shù)據(jù)交換,如關(guān)系型數(shù)據(jù)庫: MSSQLServer、MYSQL、 Oracle、 DB2 等;文件格式: DBF、 Excel、 Txt、 Cvs 等。 6) 通過審核 當(dāng)所有的數(shù)據(jù)都驗證無誤之后,審核人員必須執(zhí)行一個通 過審核的操作,只有被執(zhí)行過該操作的數(shù)據(jù),才可以被進行處理。 4) 為通過數(shù)據(jù)列表 用戶可以將沒有通過審核的數(shù)據(jù)(以填報單位分類)先統(tǒng)一放到這個列表當(dāng)中,以便進一步的判斷或處理。 2) 審核 按照審核公式重新審核這些數(shù)據(jù)。 6) 結(jié)果反饋 將審核的結(jié)果保存到相應(yīng)的數(shù)據(jù)庫當(dāng)中,同時,如果需要的話對調(diào)用者返回一定的信息。 3) 隊列優(yōu)化 針對隊列中現(xiàn)有的各條審核任務(wù),對隊列進行重排,隊列重排的目的是針對對原始庫、基礎(chǔ)價格數(shù)據(jù)庫檢索時的優(yōu)化,以減小原始庫、基礎(chǔ)價格數(shù)據(jù)庫等大數(shù)據(jù)量數(shù)據(jù)庫的負荷。接收了審核請求并保存了審核數(shù)據(jù)包之后,系統(tǒng)會立刻向請求者發(fā)出一條正在審核的信息,以便允許請求者去做其他操作。 使用審核系統(tǒng)后臺服務(wù)的數(shù)據(jù)由兩部分構(gòu)成: ? 審核關(guān)系:由各種計算公式、條件表達式和說明信息構(gòu)成,公式中牽涉到的數(shù)據(jù)由填報信息關(guān)聯(lián)獲得。前臺的審核關(guān)系在系統(tǒng)數(shù)據(jù)報表設(shè)計時進行定義,發(fā)布時自動發(fā)布到數(shù)據(jù)采集表單中。填報人員上報數(shù)據(jù)時,由于填報數(shù)據(jù)較多,存在缺報漏報某條數(shù)據(jù)的可能,對此,系統(tǒng)會自動審核數(shù)據(jù)完整性,發(fā)現(xiàn)信息不全會自動要求用戶繼續(xù)填報或填寫備注說明情況;審核人員也可以通過審核上報數(shù)據(jù),對所有異常數(shù)據(jù)進行著重排查,核對異常數(shù)據(jù)的情況說明,發(fā)現(xiàn)問題及時通過電話聯(lián)系核實情況或退回并要求填報人員重新上報,確保數(shù)據(jù)的準(zhǔn)確性、完整性。在數(shù)據(jù)驗收時,可按照審核公式的設(shè)置,調(diào)用本級別相應(yīng)的審核關(guān)系對數(shù)據(jù)進行審核驗收。 5. 接收清單察看,可列表顯示接收數(shù)據(jù)中有哪些屬于系統(tǒng)中已有數(shù)據(jù),哪些屬于新增數(shù)據(jù),哪些屬于超出系統(tǒng)預(yù)設(shè)報送范圍的數(shù)據(jù),并針對這些數(shù)據(jù)允許用戶選擇“僅追加新數(shù)據(jù)”、“僅覆蓋原有數(shù)據(jù)”、“覆蓋原有數(shù)據(jù)并追加新數(shù)據(jù)”等接收方式(默認(rèn)采用系統(tǒng)預(yù)設(shè)的接收方式)。 對于輔助填報系統(tǒng),數(shù)據(jù)的報送和接收是分開進行的,用戶可通過數(shù)據(jù)報送功能選擇要報送的數(shù)據(jù),生成數(shù)據(jù)報送包;該數(shù)據(jù)報送包可以通過郵件等方式進行傳遞,由另一輔助填報系統(tǒng)接收,也可直接登錄網(wǎng)上直報系統(tǒng),進行上傳。在系統(tǒng)中,所有的報送數(shù)據(jù)都是集中管理的,因此在數(shù)據(jù)錄入時即可控制錄入范圍,避免重復(fù)報送或超出報送范圍的用戶進行報送。 自動更新程序比較各模塊的客戶本地版本與服務(wù)器端版本的異同,并自動從服務(wù)器下載最新 模塊覆蓋本地的版本。此時的數(shù)據(jù)提交和在線填報時的提交數(shù)據(jù)的唯一區(qū)別就是數(shù)據(jù)量的多少:離線填報可以一次提交一個或多個任務(wù)的數(shù)據(jù),而在線填報則是一個一個任務(wù)的填報、提交。 . 任務(wù)下載 選擇完要離線填報的任務(wù)和設(shè)置完要下載的歷史數(shù)據(jù)以后,系統(tǒng)會開始將所有的數(shù)據(jù)下載到本地,然后用戶即可以斷開 Inter連接并開始離線填報。 用戶進行離線填報時的總體功能流程如下: . 選擇離線任務(wù) 進行離線填報的第一步,首先是選擇要填報的報表。進行離線填報時,用戶首先和在線填報一樣,需要登錄到系統(tǒng)中,然后選擇要離線填報的報表、下載,然后可以斷開Inter連接進行數(shù)據(jù)填報。 . 數(shù)學(xué)計算器 為方便用戶的計算,當(dāng)用戶點擊“數(shù)學(xué)計算器”之后,系統(tǒng)會顯示一個浮動在任務(wù)表格的上方、并且允許用戶繼續(xù)在表格上輸入的簡單的數(shù)學(xué)計算器,以方便用戶的一些計算。確定了要顯示的歷史數(shù)據(jù)后,系統(tǒng)會已標(biāo)簽( Tab)頁的形式顯示用戶所選擇的歷史數(shù)據(jù)和當(dāng)前數(shù)據(jù),用戶這時可以自由的在這些標(biāo)簽( Tab)頁之間切換。對于任務(wù)狀態(tài)為“等待審核”的任務(wù),執(zhí)行了本操作之后,會將所提交的數(shù)據(jù)從審 核服務(wù)器的審核隊列中刪除,同時更改本任務(wù)的當(dāng)前狀態(tài)為“已撤回”。 . 清空報表數(shù)據(jù)設(shè)計 清空當(dāng)前報表中所有需要由用戶手工輸入的數(shù)據(jù),不包括那些為了提示用戶輸入而自動顯示的數(shù)據(jù)。 注:并不是任何時候都需要進行校驗,在下列情況下,系統(tǒng)不會進行校驗: ? 報表只讀時不需要校驗。這些信息不允許輸入者隨意的改變,必須通過相關(guān)的入口(比如單位名稱需要從用戶管理的維護中去修改)進行修改。在輸入時不受數(shù)據(jù)長度的限制,輸入結(jié)束時會進行數(shù)據(jù)范圍的檢查,并且會根據(jù)年月的數(shù)值動態(tài)調(diào)整日的輸入范圍; ? 時間型:分為時、分兩個輸入框輸入,并且都只能輸入 10 個阿拉伯?dāng)?shù)字,其中時的數(shù)值范圍為 0~ 23,分的數(shù)值范圍為 0~ 59。超出數(shù)據(jù)長度限制部分的字符無法輸入; ? 編碼字符型:僅能輸入由指標(biāo)的設(shè)計者所指定的一些字符。 ? 禁止填寫:指用戶無需填寫的指標(biāo)。 用戶填報數(shù)據(jù)時,系統(tǒng)主要的工作流程如下圖所示: 在本部分中,系統(tǒng)與用戶主要交互的信息包括: ( 1)、填報說明:顯示當(dāng)前打開的填報報表的填報說明,包括報表說明、上報周期、審核關(guān)系等 ,指標(biāo)解釋不在這里說明; ( 2)、指標(biāo)解釋:當(dāng)鼠標(biāo)移動到一個指標(biāo)所在單元格時,頁面上將以工具提示( ToolTips)的方式提示該指標(biāo)的說明信息,主要包括指標(biāo)的解釋、數(shù)據(jù)范圍、該指標(biāo)數(shù)據(jù)的填報規(guī)范等; ( 3)、相關(guān)數(shù)據(jù):與當(dāng)前填報的任務(wù)報表相關(guān)的一些數(shù)據(jù),比如上月數(shù)、上年數(shù)、累加數(shù)等。 . 支持對 HTML 元素的屬性控制 . 報表發(fā)布 報表制定好后,可以直接發(fā)布到采集系統(tǒng)中。 . 控件的拖拽 可以通過拖拽的方式,將控件拖放到表單上。 ? 可以把外部工具制作的表格,如: dreamweaver、 frontpage、 word、 excel等制作的表格導(dǎo)入到系統(tǒng)中生成表樣 。 錯誤信息顯示:每條邏輯關(guān)系必須包含錯誤提示信息,當(dāng)審核結(jié)果發(fā)現(xiàn)錯誤時顯示給用戶便于閱讀。 . 指標(biāo)維護 基于元數(shù)據(jù)管理平臺中的指標(biāo)元數(shù)據(jù)管理模塊,實現(xiàn)針對專業(yè)制度的元數(shù)據(jù)管理。 二、 表關(guān)系管理 通過 ER 圖這種直觀的方式,完成表關(guān)系的管理與設(shè)置,如下圖所示: 用戶可以選擇已有表或新建表,然后通過拖拽字段,完成表之間關(guān)系的設(shè)置。 ? 提供表的版本管理,可以追溯至某個版本的 變化,并導(dǎo)出相應(yīng)的 DDL語句; ? 支持上下文管理; ? 以上所有操作均需要在瀏覽器模式下完成。 ? 支持指標(biāo)審核關(guān)系的自由設(shè)置,同時提供常規(guī)的審核公式函數(shù)庫。 . 信息 報送 平臺 . 填報制度管理 填報制度的管理是數(shù)據(jù)采集、存儲、查詢、分析等一切應(yīng)用的基礎(chǔ),如何提供方便完善的統(tǒng)計制度管理功能,是數(shù)據(jù)庫建設(shè)成功與否的重要基石。這種關(guān)系可幫助我們更好的理解數(shù)據(jù),追蹤出現(xiàn)的問題等。 . 指標(biāo)元數(shù)據(jù)管理 作為一項特殊的業(yè)務(wù)元數(shù)據(jù),指標(biāo)元數(shù)據(jù)在業(yè)務(wù)應(yīng)用中具有非常重要的地位,在元數(shù)據(jù)管理系統(tǒng)的基礎(chǔ)上,實現(xiàn)對信息資源的指標(biāo)元數(shù)據(jù)的管理與維護功能: ? 對指標(biāo)元數(shù)據(jù)的分類管理 ? 基本信息維護 ? 使用情況監(jiān)管 ? 存儲信息監(jiān)管 ? 元數(shù)據(jù)歸并管理 ? 派生指標(biāo)的管理 ? 操作日志 ? 版本控制與追溯 . 技術(shù)元數(shù)據(jù)管理 技術(shù)元數(shù)據(jù)原理用于管理物理上生產(chǎn)、存儲、傳遞業(yè)務(wù)元數(shù)據(jù)的信息資產(chǎn),包括應(yīng)用軟件、程序組件(服務(wù))、數(shù)據(jù)庫、表、字段等各種對象,并描述這些錯綜復(fù)雜的對象之間的相互關(guān)系,以及與業(yè)務(wù)元數(shù)據(jù)的對應(yīng)關(guān)系。 ? 基礎(chǔ)數(shù)據(jù)管理:建立各類基礎(chǔ)數(shù)據(jù)與元數(shù)據(jù)的映射關(guān)系,實現(xiàn)統(tǒng)一 的數(shù)據(jù)查詢、處理、報表管理。 4 數(shù)據(jù)表示 C..40 5 計量單位 6 同義詞 7 標(biāo)準(zhǔn)字段名 DIV_NAME 8 值域 采用 GB/T 2260 《中華人民共和國行政區(qū)劃代碼》中的名稱 9 語境 通用 10 國標(biāo)對照編號 1110 11 備注 數(shù)據(jù)元編號建議采用特征組合編碼方式進行編碼,一個建議的編號模式如下: . 元數(shù)據(jù)維護 根據(jù)業(yè)務(wù)需求,制定統(tǒng)一的技術(shù)元數(shù)據(jù)和業(yè)務(wù)元數(shù)據(jù)標(biāo)準(zhǔn),覆蓋多種來源統(tǒng)計數(shù)據(jù)采集、加工、清洗、加載、多維生成、分析利用、發(fā)布、歸檔等各個環(huán)節(jié),建立相應(yīng)的管理維護機制,梳理并加載各種元數(shù)據(jù)。元數(shù)據(jù)管理系統(tǒng)將提供如下一些主要的功能: . 業(yè)務(wù)元數(shù)據(jù)管理 根據(jù)全系統(tǒng)信息資源規(guī)劃的結(jié)果和行業(yè)信息資源標(biāo)準(zhǔn)體系,從業(yè)務(wù)的視野出發(fā),建立的關(guān)鍵數(shù)據(jù)元、指標(biāo)等的分類、規(guī)范定義體系。 三、 Paas(平 臺即服務(wù))層 作為開放、可擴展、成熟的應(yīng)用系統(tǒng),大部分的應(yīng)用模塊都應(yīng)該是通過完善可靠的應(yīng)用開發(fā)平臺,結(jié)合實際的業(yè)務(wù)需要,通過二次開發(fā)或配置完成,配合本期項目的實際需要以及未來可擴展性的考慮,我們將提供 元數(shù)據(jù)管理平臺 、 智能搜索平臺 、 信息交換平臺 、 信息報送平臺 、 統(tǒng)計分析平臺 、 應(yīng)用支撐平臺 這六大基礎(chǔ)服務(wù)平
點擊復(fù)制文檔內(nèi)容
環(huán)評公示相關(guān)推薦
文庫吧 www.dybbs8.com
備案圖片鄂ICP備17016276號-1