【正文】 常用綜合評價方法 Synthetical Evaluation 第二十三章 Content ? Concept ? Process ? Selection and weight estimation of evaluation index ? Analytic hierarchy process,AHP ? Topsis ? Rank sum ratio,RSR 例如，某人英語考試成績 58分 是否對照某標準判斷此結果 是 否 評 價（ evaluation) 僅是描述，反映現(xiàn)狀 1. 基本概念 ?Synthetical evaluation綜合評價 ?Definition:利 用多項指標對某個評價對象的某種屬性進行定性、定量評估，或者對多個評價對象的屬性進行定性、定量評估，可對優(yōu)劣順序排序。 ?Application:對比， 擇優(yōu) ?Purpose: 支持決策（基礎、預防、臨床、管理中廣泛應用） 綜合評價的一般步驟 ? 對某事件進行多因素綜合評價的過程，實質上就是 科學研究與決策 的過程，原則上應包括 設計、收集資料和分析資料 幾個基本階段，實施中應著重注意以下幾個 基本環(huán)節(jié) 。 ① 選擇恰當?shù)脑u價指標 (evaluation indicator) ② 確定各評價指標權重 ③ 合理確定各單個指標的評價等級 (evaluation grade)及其界限 ④ 建立綜合評價模型 (synthetical evaluation model) ⑤ 確定多指標綜合評價的等級數(shù)量界限，并根據(jù)實踐對已建立模 型考察、修改及完善。 研究目的 ：學生綜合測評（綜合評分） ? 評價指標 ：德育總分、智育總分、體育 總分（加分： CET） ? 權重： 方案 1：德育 智育 體育 方案 2：德育 智育 體育 方案 3：德育 智育 體育 加分 ? 評價模型： 評分法、總分為 100，加分不封頂，累加法。 ? 評價結果 : 學生甲：德育 90 智育 70 體育 80 學生乙：德育 70 智育 80 體育 70 指標 德育總分 智育總分 體育總分 加分 綜合評價總得分 權重 0. 3 0. 6 0. 1 方案 1 甲學生 90 70 80 0. 3 90 ＋ 70 ＋ 0 .1 80 ＝ 77 乙學生 70 80 70 0. 3 70 ＋ 80 ＋ 0 .1 70 ＝ 76 指標 德育總分 智育總分 體育總分 加分 綜合評價總得分 權重 0. 1 0. 8 方案 2 甲學生 90 70 80 0. 1 90 ＋ 0. 8 70 ＋ 0. 1 80 ＝ 7 3 乙學生 70 80 70 0. 1 70 ＋ 0. 8 80 ＋ 0. 1 70 ＝ 7 8 指標 德育總分 智育總分 體育總分 加分 綜合評價總得分 權重 0. 3 0. 6 0. 1 CE T 方案 3 甲學生 90 70 80 0 0. 3 90 ＋ 70 ＋ 0 .1 80 ＝ 7 7 乙學生 70 80 70 2 0. 3 70 ＋ 80 ＋ 0 .1 70 ＋ 2 ＝ 7 8 綜合評價一般步驟示例 研制新生兒缺氧狀況的Apgar評分方法 研究目的 據(jù)專業(yè)知識，選擇 5個指標 ① 心率 ② 呼吸 ③ 肌張力 ④ 反射 ⑤ 皮膚顏色 5個指標具有相等權重 選擇指標 確定權重 以累加法累計總分： 8～ 10分為正常； 4～ 7分為輕度缺氧； 0～ 3分為重度缺氧。 確定指標評價等級及界限 建立模型 評價指標的基本要求 基本要求 ① 代表性 ：各層次指標能最好地表達所代表的層次。 ② 確定性 ：指指標值確定，其高低在評價中有確切含義。 ③ 區(qū)別能力 / 靈敏性 ：即指標值有一定的波動范圍，而且其高低在評價中有確切的含義。 ④ 獨立性 ：即選入的指標各有所用，相互不能替代。 選擇綜合評價指標 系統(tǒng)分析法及文獻資料 分析優(yōu)選法篩選指標 缺乏有關歷史資料，或指標難以數(shù)量化時 系統(tǒng)分析法 (systematic analysis method)：是一種常用的 憑經(jīng)驗挑選指標的方法 ，首先將所有備選指標按系統(tǒng)（或屬性、類別）劃分，再通過座談或填調(diào)查表的方法獲得對各指標的專家評分，確定主次，再從各系統(tǒng)內(nèi)挑選主要的指標作為評價指標。 文獻資料分析優(yōu)選法： 即全面查閱有關評價指標設置的文獻資料，分析各指標的優(yōu)缺點并加以取舍。 常用客觀篩選指標方法 ? 逐個指標進行假設檢驗的方法 ：是在掌握有關歷史資料基礎上，依照可能的評價結果將評價對象分組，并對各指標進行假設檢驗，挑選 有統(tǒng)計意義的指標 作為評價指標。 ? 多元回歸與逐步回歸法 ：多元回歸分析挑選標準化偏回歸系數(shù)絕對值較大或偏回歸系數(shù)假設檢驗有顯著性的指標作為評價指標；逐步回歸有自動挑選主要影響指標的功能，是目前 最常用的指標挑選方法 。 ? 指標聚類法 ：在存在眾多指標的情況下，可將相似指標聚成類，再從每類中找一個典型指標作為代表，從而用 少量幾個典型指標 作為評價指標來代表原來眾多的指標建立評價模型。 指標篩選建議 ?在實際工作中，往往綜合使用 多種方法進行 指標篩選，在獲得較為 滿意的專業(yè)解釋 的基礎上，優(yōu)先考慮那些被 多種方法同時選入 的指標。 評價指標的權重估計 確定指標權重方法 主觀定權法 客觀定權法 專家評分法 成對比較法 Saaty權重法 秩和比法 相關系數(shù)法 其它方法 模糊定權法 熵權法 定權帶有一定的主觀性，用不同方法確定的權重分配，可能不盡一致，這將導致權重分配的不確定性，最終可能導致評價結果的不確定性。因而在實際工作中，不論用哪種方法確定權重分配，都應當 依賴于較為合理的專業(yè)解釋 。 專家評分法評分方式 1） 專家個人判斷 即分別征求專家個人意見，在專家各自單獨給評價指標的相對重要性打分的基礎上，進行統(tǒng)計處理，以確定各指標的權重。 優(yōu)點 ： 專家打分時 不受外界影響 ，沒有心理壓力，可以最大限度地發(fā)揮個人創(chuàng)造能力。 缺點 ： 僅憑個人判斷，易受 專家知識深度與廣度 的影響，難免帶有片面性。 2） 專家會議 即召開所有被挑選專家，以集體討論的方式進行評分，然后再以統(tǒng)計手段確定各指標的權重。 優(yōu)點 ： 可以交換意見， 相互啟發(fā)，彌補個人之不足 。 缺點 ： 主要表現(xiàn)在易受 心理因素的影響 ，如 屈從于權威 和大多數(shù)人的意見，受勸說性意見的影響，不愿公開修正已發(fā)表的意見等等。 6個專家對 4個評價指標的評價結果得分 5040301090802030607030108060503070404020100503010指標 A指標 B指標 C指標 D平均分654321評價對象指標指標指標指標平均分評價對象不考慮專家權威程度：權重分別是 , 在 實際工作 中 ， 常用專家的 擅長系數(shù) 和 專家意見一致性系數(shù) 等指標來估計專家評分方法所定權重