【正文】 意 ： 數(shù)據(jù)限定和規(guī)則參數(shù)是對一個(gè)表上的所有規(guī)則有效的。通過統(tǒng)計(jì)界面可繼續(xù)配置規(guī)則。 2. 系統(tǒng)概述 系統(tǒng)介紹 數(shù)據(jù)質(zhì)量 平臺 是對數(shù)據(jù)進(jìn)行稽核來 確保 數(shù)據(jù)的質(zhì)量 ，數(shù)據(jù)的及時(shí)性、完整性、準(zhǔn)確性、一致性、唯一性及合理性等，及各系統(tǒng)之間數(shù)據(jù)的統(tǒng)一性 。但隨著數(shù)據(jù)爆炸性增長，劣質(zhì)數(shù)據(jù)也隨之而來，導(dǎo)致數(shù)據(jù)質(zhì)量低劣，極大地降低了數(shù)據(jù)的可用性，導(dǎo)致決策出錯等問題。 稽核問題明細(xì)查詢 .................................................................................. 32 稽核規(guī)則查詢 ......................................................................................... 21 工單管理 .......................................................................................................... 41 動作模板配置 ......................................................................................... 41 審批流程管理 ......................................................................................... 43 工單模板配置 ......................................................................................... 43 特征信息配置 ......................................................................................... 47 工單管理 ................................................................................................ 49 待辦任務(wù) ................................................................................................ 51 工單查詢 ................................................................................................ 52 流程管理 .......................................................................................................... 52 部署流程 ................................................................................................ 52 添加鏈接 ................................................................................................ 53 添加參數(shù)集 ............................................................................................ 54 啟動流程 ................................................................................................ 55 查看未處理任務(wù) ..................................................................................... 56 查看流程進(jìn)度 ......................................................................................... 57 數(shù)據(jù)質(zhì)量平臺操作手冊 北京東方國信科技股份有限公司版權(quán)所有 3 處理任務(wù) ................................................................................................ 58 查看已處理任務(wù)及流程進(jìn)度 .................................................................... 58 數(shù)據(jù)質(zhì)量平臺操作手冊 北京東方國信科技股份有限公司版權(quán)所有 4 1. 引言 編寫目的 為讓使用者能快速熟悉和使用數(shù)據(jù)質(zhì)量平臺，特提供操作手冊。 Technology Ltd. 北京市朝陽區(qū)望京北路 9 號 D 座 1100 郵編 : 100102 電話： 01064398920 數(shù)據(jù)質(zhì)量平臺操作手冊 北京東方國信科技股份有限公司版權(quán)所有 1 歷史記錄 版本 修改時(shí)間 修改內(nèi)容 2020/10/10 新增稽核問題血緣關(guān)系功能 數(shù)據(jù)質(zhì)量平臺操作手冊 北京東方國信科技股份有限公司版權(quán)所有 2 目錄 1. 引言 .......................................................................................................................... 4 系統(tǒng)概述 ............................................................................ 錯誤 !未定義書簽。 系統(tǒng)運(yùn)行環(huán)境 ..................................................................... 錯誤 !未定義書簽。操作手冊介紹系統(tǒng)每個(gè)功能和操作方法。因此，數(shù)據(jù)質(zhì)量是決策戰(zhàn)略的重要前提，保障數(shù)據(jù)的質(zhì)量是大數(shù)據(jù)時(shí)代的重中之重。通過對數(shù)據(jù)配置稽核規(guī)則，由數(shù)據(jù)質(zhì)量 平臺啟動稽核引擎 運(yùn)行稽核任務(wù)， 顯示 稽核結(jié)果 。 稽核規(guī)則配置 稽核規(guī)則是對數(shù)據(jù)的規(guī)定，通過稽核規(guī)則驗(yàn)證數(shù)據(jù)的正確性和有效性，并提高數(shù)據(jù)使用質(zhì)量，供決策者參考。每個(gè)規(guī)則稽核的數(shù)據(jù)都是數(shù)據(jù)限定的數(shù)據(jù)。根據(jù) 的各規(guī)則說明進(jìn)行填寫。 數(shù)據(jù)質(zhì)量平臺操作手冊 北京東方國信科技股份有限公司版權(quán)所有 8 規(guī)則參數(shù)主要是對賬期和省份設(shè)置，或其他，在 ETL 稽核任務(wù)啟動是填寫參數(shù)值。 數(shù)據(jù)質(zhì)量平臺操作手冊 北京東方國信科技股份有限公司版權(quán)所有 9 空值校驗(yàn) 空值校驗(yàn)是對某一列數(shù)據(jù)含有空值的校驗(yàn)。 參照校驗(yàn) 參照校驗(yàn)是稽核數(shù)據(jù)與參照數(shù)據(jù)比較校驗(yàn)。以下其他規(guī)則使用到參照表數(shù)據(jù)限定都使用編輯器填寫。波動校驗(yàn)分同比校驗(yàn)、環(huán)比校驗(yàn)和占比校驗(yàn)三種子校驗(yàn)。 ? 環(huán)比校驗(yàn)，本時(shí)段數(shù)據(jù)與上一個(gè)統(tǒng)計(jì)時(shí)段的數(shù)據(jù)比較校驗(yàn)。 稽核方式提供：稽核列，對單列的數(shù)據(jù)進(jìn)行校驗(yàn) 稽核表達(dá)式，對表達(dá)式計(jì)算后的數(shù)據(jù)進(jìn)行校驗(yàn) 注意： 波動校驗(yàn) 必須 通過規(guī)則參數(shù)和數(shù)據(jù)限定確定某年度是哪個(gè)年度等對應(yīng)的周期類型，格式見 稽核規(guī)則配置 數(shù)據(jù)質(zhì)量平臺操作手冊 北京東方國信科技股份有限公司版權(quán)所有 14 維度列支持表達(dá)式，提供編輯器，雙表維度匯總的維度列也支持表達(dá)式和編輯器。 計(jì)算式：稽核列達(dá)式中與參考列達(dá)式數(shù)據(jù)不一致的個(gè)數(shù) /稽核總數(shù) ? 單表匯總，對單表中的稽核列達(dá)式和與參照列達(dá)式和是否一致校驗(yàn)。 數(shù)據(jù)質(zhì)量平臺操作手冊 北京東方國信科技股份有限公司版權(quán)所有 16 ? 雙表單行，同時(shí)滿足稽核行標(biāo)識號和參照行標(biāo)識列的稽核列數(shù)據(jù)和參照列數(shù)據(jù)每行的一致性校驗(yàn) 計(jì)算式：同時(shí)滿足稽核行標(biāo)識號和參照 行標(biāo)識列的稽核列數(shù)據(jù)和參照列數(shù)據(jù)不一致的個(gè)數(shù) /稽核總數(shù) 邏輯校驗(yàn) 邏輯校驗(yàn)，對條件表達(dá)式是否滿足的校驗(yàn)。 數(shù)據(jù)質(zhì)量平臺操作手冊 北京東方國信科技股份有限公司版權(quán)所有 17 注意 ： 表達(dá)式提供， =、 =、 =、 、 in、 not in、 like、 is null、 is not null；支持 1=1表達(dá)式。 計(jì)算式： select count(f) b,c from table where count(a)/100.01 group by b,c后， count(f)的值是否為 ，否則正確。 ? 自定義規(guī)則校驗(yàn) SQL：用戶自 己按照需要稽核的結(jié)果來填寫稽核規(guī)則 ? 自定義規(guī)則錯誤明細(xì)列：錯誤信息用于在用戶查看錯誤樣例