數(shù)據(jù)資源加工指導(dǎo)規(guī)范標(biāo)準(zhǔn)-wenkub.com
2025-04-04 23:10 本頁(yè)面
【正文】 不奮斗就是每天都很容易，可一年一年越來越難。執(zhí)行數(shù)據(jù)更新時(shí)一般應(yīng)重新執(zhí)行本數(shù)據(jù)庫(kù)采集加工的完整流程。關(guān)于數(shù)據(jù)審核的方法與審核結(jié)果應(yīng)包含在數(shù)據(jù)庫(kù)用戶手冊(cè)和數(shù)據(jù)庫(kù)對(duì)應(yīng)的元數(shù)據(jù)當(dāng)中。如果學(xué)科領(lǐng)域內(nèi)已存在相關(guān)的數(shù)據(jù)質(zhì)量管理國(guó)際、國(guó)家規(guī)范或行業(yè)標(biāo)準(zhǔn)，數(shù)據(jù)審核宜采用這些相關(guān)標(biāo)準(zhǔn)。 數(shù)據(jù)審核可以貫穿于整個(gè)數(shù)據(jù)資源加工過程之中，可以量化評(píng)價(jià)的內(nèi)容包括數(shù)據(jù)來源質(zhì)量評(píng)價(jià)、數(shù)據(jù)加工模型與算法質(zhì)量評(píng)價(jià)、數(shù)據(jù)產(chǎn)品質(zhì)量評(píng)價(jià)等。 數(shù)據(jù)審核 數(shù)據(jù)審核是一種評(píng)價(jià)過程。 ? 入庫(kù)：數(shù)據(jù)存入數(shù)據(jù)庫(kù)。 ? 查重：對(duì)收集到的數(shù)據(jù)在已建數(shù)據(jù)庫(kù)中查重?？茖W(xué)數(shù)據(jù)產(chǎn)品應(yīng)當(dāng)有統(tǒng)一的分類和編碼系統(tǒng)，有統(tǒng)一的數(shù)據(jù)格式或能提供轉(zhuǎn)換接口；應(yīng)當(dāng)置備標(biāo)準(zhǔn)、完善的元數(shù)據(jù)；應(yīng)當(dāng)有數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)，并經(jīng)規(guī)范的質(zhì)量檢驗(yàn)與修正；還要有標(biāo)注明確的外包裝。 z 1 級(jí)數(shù)據(jù)：經(jīng)初步加工，包括數(shù)據(jù)項(xiàng)的必要注釋、數(shù)據(jù)格式的簡(jiǎn)單轉(zhuǎn)換等，成為能讓他人理解的數(shù)據(jù)。根據(jù)數(shù)據(jù)資源加工程度的不同，數(shù)據(jù)產(chǎn)品可分為多級(jí)。 數(shù)據(jù)處理加工與產(chǎn)品生產(chǎn) 數(shù)據(jù)加工處理是指對(duì)已經(jīng)采集的數(shù)據(jù)按照擬定的數(shù)據(jù)加工模型和算法進(jìn)行匯總、計(jì)算、分析及數(shù)字化處理的過程。 數(shù)據(jù)加工應(yīng)基于統(tǒng)一的模型，如概念模型，地理坐標(biāo)系，高程參照系，時(shí)間模型，統(tǒng)一的文件格式等。 維歸約 通過刪除不相關(guān)的屬性（或）維減少數(shù)據(jù)量。 規(guī)范化 將屬性數(shù)據(jù)按比例縮放，使之落入一個(gè)小的特定區(qū)間， 到 或 到 。 主要方法包括： 平滑 去掉數(shù)據(jù)中的噪聲。元數(shù)據(jù)、相關(guān)分析、數(shù)據(jù)沖突檢測(cè)和語(yǔ)義異種性的解析都有助于數(shù)據(jù)集成。有些數(shù)據(jù)不一致可以使用其他材料人工地更正。 z 提高數(shù)據(jù)的完整性，對(duì)單一要素?cái)?shù)據(jù)進(jìn)行綜合。 原始數(shù)據(jù)標(biāo)準(zhǔn)化預(yù)處理 為避免原始數(shù)據(jù)過于龐大，信息過于復(fù)雜，數(shù)據(jù)受噪聲數(shù)據(jù)、空缺數(shù)據(jù)和不一致性數(shù)據(jù)的侵?jǐn)_，必要時(shí)，數(shù)據(jù)庫(kù)承建單位應(yīng)對(duì)采集得到的原始數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化預(yù)處理。 來源篩選 為確保數(shù)據(jù)產(chǎn)品的質(zhì)量，數(shù)據(jù)庫(kù)承建單位應(yīng)對(duì)原始數(shù)據(jù)獲取來源進(jìn)行選擇，建立數(shù)據(jù)來源的準(zhǔn)入門檻制度，從開始階段就對(duì)數(shù)據(jù)資源質(zhì)量進(jìn)行控制。 數(shù)據(jù)采集錄入的技術(shù)要求 z 所使用的錄入系統(tǒng)必須是指定的錄入系統(tǒng)； z 輸錄要完全忠實(shí)于采集得到的資料； z 必填內(nèi)容不得為空。 z 數(shù)據(jù)收集中，對(duì)有明顯錯(cuò)誤或不符合規(guī)律的數(shù)據(jù)亦予以剔除。 z 因不同的數(shù)據(jù)調(diào)查對(duì)象而異，采用不同的采集方法和不同的質(zhì)量控制要求。 過程策劃的結(jié)果應(yīng)該包括： z 實(shí)現(xiàn)數(shù)據(jù)加工目標(biāo)所必須的過程，以及過程之間的關(guān)聯(lián) z 每個(gè)標(biāo)準(zhǔn)化過程所應(yīng)達(dá)成的目標(biāo)和應(yīng)遵循的規(guī)范： ? 目標(biāo) ? 人員要求 ? 資源要求 ? 過程的輸入 ? 一般執(zhí)行方法 ? 過程的輸出 ? 相關(guān)文檔 數(shù)據(jù)采集 數(shù)據(jù)采集錄入是指對(duì)科學(xué)數(shù)據(jù)資源進(jìn)行收集并形成原始記錄的過程。 下列流程為不同類型科學(xué)數(shù)據(jù)庫(kù)資源采集加工常見的業(yè)務(wù)流程，以及每個(gè)業(yè)務(wù)流程相對(duì)通用的原則和質(zhì)量要求，數(shù)據(jù)庫(kù)承建單位可參照選擇適宜之條款建立所承建數(shù)據(jù)庫(kù)的采集加工過程方法。 過程策劃的輸入可以包括但不限于以下方面： z 用戶和其他相關(guān)方的需求和期望； z 對(duì)數(shù)據(jù)資源特性的評(píng)估； z 對(duì)服務(wù)過程特性的評(píng)估等。 ? 時(shí)間范圍約定：數(shù)據(jù)集描述的起止時(shí)間 ? 空間范圍約定（如適用）：數(shù)據(jù)集描述的地理空間范圍 ? 學(xué)科范圍約定： z 數(shù)據(jù)量 z 數(shù)據(jù)類型約定 z 數(shù)據(jù)質(zhì)量期望，如填充率水平、差錯(cuò)率水平、主要數(shù)據(jù)來源等 z 數(shù)據(jù)庫(kù)模型，如 ER 圖等 z 數(shù)據(jù)字典 對(duì)于每個(gè)數(shù)據(jù)元素，應(yīng)在以下方面進(jìn)行描述： ? 數(shù)據(jù)來源 ? 采集方法，如采集的部分，拍照要求，計(jì)算公式等 ? 設(shè)備要求 ? 編碼方法 ? 精確度 ? 參照系 對(duì)數(shù)據(jù)采集加工內(nèi)容的確定應(yīng)特別注重其規(guī)范性，相關(guān)的規(guī)范包括項(xiàng)目規(guī)范、任何可能存在的國(guó)家標(biāo)準(zhǔn)、國(guó)際標(biāo)準(zhǔn)或行業(yè)標(biāo)準(zhǔn)等。 必要時(shí)，建庫(kù)單位應(yīng)保留數(shù)據(jù)采集的原始記錄一定時(shí)間，以備查證使用。 適用時(shí)，數(shù)據(jù)資源采集整理工作指南應(yīng)包括以下內(nèi)容： z 數(shù)據(jù)來源說明，如資料列表，數(shù)據(jù)準(zhǔn)入原則等 z 數(shù)據(jù)約定，對(duì)擬建數(shù)據(jù)庫(kù)規(guī)格的約定，包括數(shù)據(jù)采集的文件格式，數(shù)據(jù)庫(kù)模型，指標(biāo)設(shè)置，各項(xiàng)指標(biāo)的定義、公式、測(cè)量方法、精度要求，以及數(shù)據(jù)采集所使用的樣表等。 組織管理 數(shù)據(jù)庫(kù)主要承建單位負(fù)責(zé)所承建數(shù)據(jù)庫(kù)內(nèi)數(shù)據(jù)資源采集加工過程的領(lǐng)導(dǎo)、組織、協(xié)調(diào)和管理。數(shù)據(jù)資源建設(shè)工作應(yīng)當(dāng)切實(shí)以用戶需求為導(dǎo)向，以應(yīng)用為目標(biāo)，做真正用戶需要的數(shù)據(jù)，而不是盲目地?cái)U(kuò)大數(shù)據(jù)內(nèi)容范圍和提升技術(shù)指標(biāo)。 突出重點(diǎn)，注重基礎(chǔ) 數(shù)據(jù)資源的內(nèi)容選擇
公司管理相關(guān)推薦
鄂ICP備17016276號(hào)-1