數據采集與分析word版(存儲版)
【正文】 UPDATE 清理數據表 SET mj=0 WHERE mj IS NULL 消消 除除 冗冗 余余 數數 據據 ? 清理憑證數據表中科目代碼以 ―s‖開頭的現金流量輔助信息冗余記錄： – DELETE FROM 清理數據表 WHERE kmdh LIKE 39。 ? 數據轉換的前提是類型相容 。 數數 據據 轉轉 換換 的的 一一 般般 方方 法法 ? 專用工具 ? SQL語言 ? 程序編碼 必必 須須 運運 用用 程程 序序 編編 碼碼 的的 場場 合合 ? 對非關系型數據庫中的數據進行轉換 ? 對復雜的數據文件中的數據進行轉換 ? 數據轉換的要求固定而使用頻繁時 五五 、 審審 計計 數數 據據 驗驗 證證 不不 同同 階階 段段 的的 數數 據據 驗驗 證證 ? 數據采集階段 – 檢查被審計單位提供資料的完整性，保證數據采集工作準確有效地進行，同時對采集到的數據進行確認，排除遺漏和失誤。 四四 種種 數數 據據 分分 析析 模模 型型 ? 絕對模型 ? 解釋模型 ? 思考模型 ? 公式模型 絕絕 對對 模模 型型 （（ Categorical Model）） ? 它 屬于靜態(tài)數據分析 ? 它通過比較歷史數據值或行為來描述過去發(fā)生的 事實 ? 查詢比較簡單，僅是值的比較 ? 綜合路徑是原有數據庫設計時定義好的，用戶交互少 ? 支持工具廣泛（包括一般的查詢表格工具）。 多維分析工具進行的就是典型的驗證型分析。 ? 操作型處理也叫事務處理， 是指對 數據庫聯機地進行日常操作，通常是對一個或一組記錄的查詢和修改，主要是為特定的應用服務。 OLAP 的實現方式 基于 多維數據庫的實現 基于關系數據庫的實現 數數 據據 倉倉 庫庫 與與 OLAP的的 關關 系系 建立數據倉庫的目的是 為了支持數據分析和決策制定過程 。 ? 一般包括一個專用的審計接口，使用方便，效率很高 。 審審 計計 軟軟 件件 分分 類類 ? 通用的 ? 專用的 ? 基于數據庫的 ? 基于數據倉庫的 ? 基于專家系統(tǒng)的 ? 基于神經網絡 ? 其他專業(yè)化的工具 通通 用用 的的 審審 計計 軟軟 件件 的的 功功 能能 （ 1）數據訪問和轉換功能 （ 2）數 據檢索（抽?。?、匯總、計算、分組和排序功能 （ 3）一般統(tǒng)計、分層分析、斷號 /重號分析、時間序列分析、關聯分析等分析工具 （ 4）審計抽樣工具 （ 5）審計過程的記錄和中間結果的管理功能 （ 6）報表功能 通通 用用 的的 審審 計計 軟軟 件件 ? ACL ? IDEA， 現更名為 CASEWARE 專專 用用 審審 計計 軟軟 件件 的的 特特 點點 ? 審計功能是面向特定的行業(yè)審計的，操作簡單 。 ? OLAP的目標 是滿足決策支持或多維查詢和報表的需求，它的技術核心是 ―維 ‖這個概念 ，因此 OLAP也可以說是多維數 據分析工具的集合。 三三 種種 分分 析析 方方 法法 涉涉 及及 的的 分分 析析 模模 型型 ? 查詢型分析基本上不涉及數據分析模型； ? 驗證型分析主要實現了 絕對模型、解釋模型和思考模型 ； ? 發(fā)掘型分析則實現了公式模型 。 ? 可以采用 SQL等語言來交互描述查詢要求 ； ? 采用 SQL可以十分靈活地進行交互式查詢，但要求用戶掌握 SQL語言，并對訪問的數據庫的結構有所了解； 查查 詢詢 型型 分分 析析 中中 的的 數數 據據 建建 模模 ? 根據相關法律法規(guī)建立模型 ? 根據系統(tǒng)數據之間的勾稽關系建立模型 ? 根據不同系統(tǒng)數據之間的關系建立模型 ? 根據審計業(yè)務流程建立模型 ? 根據以往審計經驗建立模型 ? 根據自然規(guī)律建立模型 根據相關分析指標建立模型 驗驗 證證 型型 分分 析析 （（ Verification）） 驗證型分析指用戶先提出自己的假設 ，然后利用各種工具通過反復的、遞歸的檢索查詢以驗證或否定自己的假設。 六六 、 審審 計計 數數 據據 分分 析析 審審 計計 數數 據據 分分 析析 的的 具具 體體 操操 作作 ? 核對 ： ? 檢查 ： ? 復算 ： ? 判斷 ： 分分 析析 模模 型型 的的 演演 變變 ? 隨著用戶對數據分析 的深度和靈活程度要求越來越高，數據分析漸漸從靜態(tài)數值的相互比較轉變到從多個數據源中綜合數據，從多個角度觀察數據的復雜、動態(tài)的分析。 ? 一種清潔和刷洗是 檢查數據字段中的有效值 。 數數 據據 轉轉 換換 的的 基基 本本 類類 型型 1． 簡單變換 （ 1）數據類型轉換 （ 2）日期 /時間格式的轉換 （ 3）代碼轉換 （ 4）值域轉換 2． 清潔和刷洗 （ 1）有效值檢查 （ 2）復雜的重新格式化 簡簡 單單 變變 換換 ? 它是數據轉換中最簡單的形式 ? 它是所有數據轉換的基本構成單元 ? 它一次改變一個字段的屬性 ? 它不考慮該屬性的背景或與它相關的其他字段的信息 簡簡 單單 變變 換換 —— —— 數數 據據 類類 型型 轉轉 換換 ? 最常見的簡單變換是轉換一個數據元 的類型 。 數數 據據 清清 理理 的的 主主 要要 工工 作作 ? 確認輸入數據 ? 消除錯誤的空值（ NULL） ? 保證數據值落入定義域 ? 消除冗余數據 ? 解決數據中的沖突 （不一致） 數數 據據 清清 理理 的的 基基 本本 技技 術術 ? 解決不完整數據（即值缺失）的方法 ： ? 錯誤值的檢測及解決方法 ：用統(tǒng)計分析的方法識別可能的錯誤值或異常值，如偏差分析、識別不遵守分布或回歸方程的值；使用簡單規(guī)則 庫（常識性規(guī)則、業(yè)務特定規(guī)則等）檢查數據值；使用不同屬性間的約束；使用外部數據。 數數 據據 采采 集集 的的 實實 現現 ? 使用移動存儲介質拷貝數據文件； ? 通過簡單設備建立審計人員的計算機與被審計單位的計算機之間的連接； ? 將審計人員的計算機接入被審計單位的局域網絡中； ? 通過廣域網絡遠程采集數據。 用用 文文 本本 文文 件件 交交 換換 數數 據據 ? 優(yōu)點： – 靈活方便 – 數據量大小基本不受限制 ? 缺點： – 占用較大的存儲空間 – 較多的傳輸時間 – 需要進行類型或字段名稱的重定義 ? 分類： – 分隔符形式 – 固定 寬度 ? 分隔符形式的文本文件 – 以回車換行符號作為記錄間的分隔 – 以分隔符作為字段之間的分隔 –
公司管理相關推薦
鄂ICP備17016276號-1