素質測評的質量分析(已修改)
2025-05-26 11:54 本頁面
【正文】 第十二章 素質測評的質量分析 ?一項測評是否可靠、可信？ ?一項測評是否準確、有用？ ?一項測評是否公正、公平？ ?一項測評是否經濟、合理？ ?教學內容 121 測評的信度 1211 信度及其影響因素 1212 信度的評估方法 122 測評的效度 1221 效度及其影響因素 1222 效度的評估方法 123 項目分析 1231 測評的難度分析 1232 測評的鑒別度分析 1233 測評的公平性分析 1234 測評的經濟效益分析 121 測評的信度 ?信度是標準化素質測評的基本要求之一，如果測評工具的信度不理想，測量結果就無法被認為能代表應試者的一致、穩(wěn)定和可靠的行為表現(xiàn)，就可能誤導對應試者的評價。 1211 信度及其影響因素 ? 如果我們用一個游標卡尺來測量一個鋼管的外直徑，每次測量時都難免會有一定的誤差。 ? 首先，游標卡尺作為一種測量工具是有一定精度限制的，也就是說，測量工具本身存在誤差。當然這種誤差是必然存在的，而且誤差是在一定范圍中有規(guī)律的變動的，這種誤差在測量工作中被稱之為 系統(tǒng)誤差（ systematic error） 。 ? 其次，我們每一次測量都可能出現(xiàn)操作上的差異，或者由于不可預見的外界因素的影響，產生測量誤差。這些誤差是很難控制的，而且無規(guī)律可循，有時大有時小，這種誤差被稱為 隨機誤差（ random error） 。 ? 前者在一定程度上可以控制，而后者很難控制，一個好的測量工具應該不僅要有盡可能高的精確度（與系統(tǒng)誤差相關），還能夠把誤差控制在一個有規(guī)律的范圍以內，這樣才能夠得到穩(wěn)定可信的測量結果。 信度實際上就是對隨機誤差的一種度量。 信度的概念 ?信度（ reliability）信度是標示測驗一致性高低的統(tǒng)計指標。主要指測量結果的 可靠性、穩(wěn)定性和一致性 ，可以定義為測驗結果不受測驗情境或測驗過程中無關變量影響的程度。實際上就是指測驗分數(shù)不受測量誤差影響的程度?？梢灾赋鰷y驗出的個體差異在多大程度上是真正的差異，又在多大程度上是由于隨機誤差造成的。 ?隨機誤差越大，信度就越低。反之，信度就越高。 ?通常任何測驗都存在某種程度的不一致性（同一受試者在不同時間或在不同的測驗條件下做同一測驗） ?因為誤差的存在，我們永遠不可能完全揭示人的心理特點，只能無限接近真實分數(shù)。 測量結果的穩(wěn)定性： ?測驗分數(shù)一致性的程度（不同時間、測驗條件下所得分數(shù)之間的一致性） ?一個人獲得分數(shù)與 “ 真實分數(shù) ” 之間的接近程度 ?測量結果的一致性是否達到實際應用的程度 影響穩(wěn)定性的原因： ?什么因素造成了這種差異（誤差的來源） ?這些效應的相對作用如何（分數(shù)的實際含意） 在研究信度時，主要應考慮兩方面的問題： 信度的計算：信度系數(shù) ? 信度指標的一般公式：測驗分數(shù) = 真實分數(shù) + 測量誤差 或者： X = T + e ? 信度的高低通常以相關系數(shù)表示，稱為信度系數(shù)（ reliability coefficient）。信度系數(shù)一般是同一樣本所得的兩組資料的相關，因此有： ?測驗分數(shù)方差 = 真實分數(shù)方差 + 誤差分數(shù)方差 ? ?X2 = ?T2 + ?e2 ? 信度系數(shù)： rxx= ?T2 / ?X2 = ?T2 / （ ?T2 + ?e2 ） ? 信度系數(shù)即是真實分數(shù)方差（變異數(shù)）與測驗分數(shù)總方差（變異數(shù)）之比。 信度的作用 ?測驗信度要能夠區(qū)分出： ?導致一致性的因素： 個體穩(wěn)定的特性（測量對象） ?導致不一致性的因素： 可能影響測驗，但又與測驗對象沒有關系的個體和環(huán)境的特性 ?在素質測評中，對信度系數(shù)進行確定通常有以下作用： ?解釋真實分數(shù)與實得分數(shù)之間的相關 ?說明可以接受的信度水平 幾種心理測驗的信度系數(shù) 測驗類型 信度 低 中 高 成套成就測驗 學術能力測驗 成套傾向性測驗 客觀人格測驗 興趣問卷 態(tài)度量表 信度的影響因素 ? 受試者個體持久而泛化的特性 ： ?進行測驗的一般技能水平 ?理解測驗指示語的一般能力水平 ?進行類似測驗的一般的人格特質 ? 受試者個體持久而特殊的特性 ： ?進行某項測驗（或其形式）需要的特殊的技能、能力 和特質；以及穩(wěn)定的反映定勢； ?對某個測驗項目內容的熟悉程度 ? 受試者個體短時而泛化的特性 ： ?健康、疲勞、動機、情緒狀態(tài)、測驗自如性；溫度、 光亮、通風等測驗外部條件 ? 受試者個體短時而特殊的特性 ?對特殊測驗的理解，測驗所需要的特殊技巧；為做測驗所進行的練習； ?對測驗項目內容的注意、記憶等的飄忽不定。 ? 影響測驗過程和解釋的外部因素系統(tǒng)改變 ?測驗條件；對測驗的各種限制；干擾程度；指示語的清晰度； ?受試者在個性、性別、種族等與測驗主試的交互作用； ?對測驗結果的不一致或有偏差的評判。 ?無法解釋的變化（隨機因素） ?猜測、運氣，以及暫時的干擾 1212 信度的評估方法 ?針對不同的誤差來源，信度可以有不同的確定方法。 信度系數(shù)類型 誤差來源 重測信度 時間取樣 復本信度（即時）
公司管理相關推薦
鄂ICP備17016276號-1