數(shù)據(jù)采集與分析word版(存儲版)
【正文】 UPDATE 清理數(shù)據(jù)表 SET mj=0 WHERE mj IS NULL 消消 除除 冗冗 余余 數(shù)數(shù) 據(jù)據(jù) ? 清理憑證數(shù)據(jù)表中科目代碼以 ―s‖開頭的現(xiàn)金流量輔助信息冗余記錄： – DELETE FROM 清理數(shù)據(jù)表 WHERE kmdh LIKE 39。 ? 數(shù)據(jù)轉(zhuǎn)換的前提是類型相容 。 數(shù)數(shù) 據(jù)據(jù) 轉(zhuǎn)轉(zhuǎn) 換換 的的 一一 般般 方方 法法 ? 專用工具 ? SQL語言 ? 程序編碼 必必 須須 運運 用用 程程 序序 編編 碼碼 的的 場場 合合 ? 對非關(guān)系型數(shù)據(jù)庫中的數(shù)據(jù)進行轉(zhuǎn)換 ? 對復(fù)雜的數(shù)據(jù)文件中的數(shù)據(jù)進行轉(zhuǎn)換 ? 數(shù)據(jù)轉(zhuǎn)換的要求固定而使用頻繁時 五五 、 審審 計計 數(shù)數(shù) 據(jù)據(jù) 驗驗 證證 不不 同同 階階 段段 的的 數(shù)數(shù) 據(jù)據(jù) 驗驗 證證 ? 數(shù)據(jù)采集階段 – 檢查被審計單位提供資料的完整性，保證數(shù)據(jù)采集工作準確有效地進行，同時對采集到的數(shù)據(jù)進行確認，排除遺漏和失誤。 四四 種種 數(shù)數(shù) 據(jù)據(jù) 分分 析析 模模 型型 ? 絕對模型 ? 解釋模型 ? 思考模型 ? 公式模型 絕絕 對對 模模 型型 （（ Categorical Model）） ? 它 屬于靜態(tài)數(shù)據(jù)分析 ? 它通過比較歷史數(shù)據(jù)值或行為來描述過去發(fā)生的 事實 ? 查詢比較簡單，僅是值的比較 ? 綜合路徑是原有數(shù)據(jù)庫設(shè)計時定義好的，用戶交互少 ? 支持工具廣泛（包括一般的查詢表格工具）。 多維分析工具進行的就是典型的驗證型分析。 ? 操作型處理也叫事務(wù)處理， 是指對 數(shù)據(jù)庫聯(lián)機地進行日常操作，通常是對一個或一組記錄的查詢和修改，主要是為特定的應(yīng)用服務(wù)。 OLAP 的實現(xiàn)方式 基于 多維數(shù)據(jù)庫的實現(xiàn) 基于關(guān)系數(shù)據(jù)庫的實現(xiàn) 數(shù)數(shù) 據(jù)據(jù) 倉倉 庫庫 與與 OLAP的的 關(guān)關(guān) 系系 建立數(shù)據(jù)倉庫的目的是 為了支持數(shù)據(jù)分析和決策制定過程 。 ? 一般包括一個專用的審計接口，使用方便，效率很高 。 審審 計計 軟軟 件件 分分 類類 ? 通用的 ? 專用的 ? 基于數(shù)據(jù)庫的 ? 基于數(shù)據(jù)倉庫的 ? 基于專家系統(tǒng)的 ? 基于神經(jīng)網(wǎng)絡(luò) ? 其他專業(yè)化的工具 通通 用用 的的 審審 計計 軟軟 件件 的的 功功 能能 （ 1）數(shù)據(jù)訪問和轉(zhuǎn)換功能 （ 2）數(shù) 據(jù)檢索（抽取）、匯總、計算、分組和排序功能 （ 3）一般統(tǒng)計、分層分析、斷號 /重號分析、時間序列分析、關(guān)聯(lián)分析等分析工具 （ 4）審計抽樣工具 （ 5）審計過程的記錄和中間結(jié)果的管理功能 （ 6）報表功能 通通 用用 的的 審審 計計 軟軟 件件 ? ACL ? IDEA， 現(xiàn)更名為 CASEWARE 專專 用用 審審 計計 軟軟 件件 的的 特特 點點 ? 審計功能是面向特定的行業(yè)審計的，操作簡單 。 ? OLAP的目標 是滿足決策支持或多維查詢和報表的需求，它的技術(shù)核心是 ―維 ‖這個概念 ，因此 OLAP也可以說是多維數(shù) 據(jù)分析工具的集合。 三三 種種 分分 析析 方方 法法 涉涉 及及 的的 分分 析析 模模 型型 ? 查詢型分析基本上不涉及數(shù)據(jù)分析模型； ? 驗證型分析主要實現(xiàn)了 絕對模型、解釋模型和思考模型 ； ? 發(fā)掘型分析則實現(xiàn)了公式模型 。 ? 可以采用 SQL等語言來交互描述查詢要求 ； ? 采用 SQL可以十分靈活地進行交互式查詢，但要求用戶掌握 SQL語言，并對訪問的數(shù)據(jù)庫的結(jié)構(gòu)有所了解； 查查 詢詢 型型 分分 析析 中中 的的 數(shù)數(shù) 據(jù)據(jù) 建建 模模 ? 根據(jù)相關(guān)法律法規(guī)建立模型 ? 根據(jù)系統(tǒng)數(shù)據(jù)之間的勾稽關(guān)系建立模型 ? 根據(jù)不同系統(tǒng)數(shù)據(jù)之間的關(guān)系建立模型 ? 根據(jù)審計業(yè)務(wù)流程建立模型 ? 根據(jù)以往審計經(jīng)驗建立模型 ? 根據(jù)自然規(guī)律建立模型 根據(jù)相關(guān)分析指標建立模型 驗驗 證證 型型 分分 析析 （（ Verification）） 驗證型分析指用戶先提出自己的假設(shè) ，然后利用各種工具通過反復(fù)的、遞歸的檢索查詢以驗證或否定自己的假設(shè)。 六六 、 審審 計計 數(shù)數(shù) 據(jù)據(jù) 分分 析析 審審 計計 數(shù)數(shù) 據(jù)據(jù) 分分 析析 的的 具具 體體 操操 作作 ? 核對 ： ? 檢查 ： ? 復(fù)算 ： ? 判斷 ： 分分 析析 模模 型型 的的 演演 變變 ? 隨著用戶對數(shù)據(jù)分析 的深度和靈活程度要求越來越高，數(shù)據(jù)分析漸漸從靜態(tài)數(shù)值的相互比較轉(zhuǎn)變到從多個數(shù)據(jù)源中綜合數(shù)據(jù)，從多個角度觀察數(shù)據(jù)的復(fù)雜、動態(tài)的分析。 ? 一種清潔和刷洗是 檢查數(shù)據(jù)字段中的有效值 。 數(shù)數(shù) 據(jù)據(jù) 轉(zhuǎn)轉(zhuǎn) 換換 的的 基基 本本 類類 型型 1． 簡單變換 （ 1）數(shù)據(jù)類型轉(zhuǎn)換 （ 2）日期 /時間格式的轉(zhuǎn)換 （ 3）代碼轉(zhuǎn)換 （ 4）值域轉(zhuǎn)換 2． 清潔和刷洗 （ 1）有效值檢查 （ 2）復(fù)雜的重新格式化 簡簡 單單 變變 換換 ? 它是數(shù)據(jù)轉(zhuǎn)換中最簡單的形式 ? 它是所有數(shù)據(jù)轉(zhuǎn)換的基本構(gòu)成單元 ? 它一次改變一個字段的屬性 ? 它不考慮該屬性的背景或與它相關(guān)的其他字段的信息 簡簡 單單 變變 換換 —— —— 數(shù)數(shù) 據(jù)據(jù) 類類 型型 轉(zhuǎn)轉(zhuǎn) 換換 ? 最常見的簡單變換是轉(zhuǎn)換一個數(shù)據(jù)元 的類型 。 數(shù)數(shù) 據(jù)據(jù) 清清 理理 的的 主主 要要 工工 作作 ? 確認輸入數(shù)據(jù) ? 消除錯誤的空值（ NULL） ? 保證數(shù)據(jù)值落入定義域 ? 消除冗余數(shù)據(jù) ? 解決數(shù)據(jù)中的沖突 （不一致） 數(shù)數(shù) 據(jù)據(jù) 清清 理理 的的 基基 本本 技技 術(shù)術(shù) ? 解決不完整數(shù)據(jù)（即值缺失）的方法 ： ? 錯誤值的檢測及解決方法 ：用統(tǒng)計分析的方法識別可能的錯誤值或異常值，如偏差分析、識別不遵守分布或回歸方程的值；使用簡單規(guī)則 庫（常識性規(guī)則、業(yè)務(wù)特定規(guī)則等）檢查數(shù)據(jù)值；使用不同屬性間的約束；使用外部數(shù)據(jù)。 數(shù)數(shù) 據(jù)據(jù) 采采 集集 的的 實實 現(xiàn)現(xiàn) ? 使用移動存儲介質(zhì)拷貝數(shù)據(jù)文件； ? 通過簡單設(shè)備建立審計人員的計算機與被審計單位的計算機之間的連接； ? 將審計人員的計算機接入被審計單位的局域網(wǎng)絡(luò)中； ? 通過廣域網(wǎng)絡(luò)遠程采集數(shù)據(jù)。 用用 文文 本本 文文 件件 交交 換換 數(shù)數(shù) 據(jù)據(jù) ? 優(yōu)點： – 靈活方便 – 數(shù)據(jù)量大小基本不受限制 ? 缺點： – 占用較大的存儲空間 – 較多的傳輸時間 – 需要進行類型或字段名稱的重定義 ? 分類： – 分隔符形式 – 固定 寬度 ? 分隔符形式的文本文件 – 以回車換行符號作為記錄間的分隔 – 以分隔符作為字段之間的分隔 –
公司管理相關(guān)推薦
鄂ICP備17016276號-1