【正文】 三節(jié) 測驗信度 一、測驗信度的概念 二、測驗信度的估計方法 三、影響信度的因素 一、測驗信度的概念 (一 )什么是信度 信度 (reliability)又叫可靠性，是指測驗結果的一致性程度。 X=T+E Sx2=ST2+SE2 rxx=ST2/SX2 rxx為信度 ， ST2為真分數(shù)方差， SE2為誤差方差。 (二 )信度的類型 二、測驗信度的估計方法 (一 )重測信度的估計方法 (二 )復本信度的估計方法 (三 )同質信度的估計方法 (四 )評分者信度的估計方法 (一 )重測信度的估計方法 rx1x2=(Σ X1X2/NM1M2)/Sx1Sx2 Rx1x2為重測信度系數(shù)， Σ 為連加號， X1為第一次測驗的分數(shù)， X2為第二次測驗分數(shù)， N為被試人數(shù)， M1為第一次測驗平均分， M2為第二次測驗的平均分， Sx1為第一次測驗分數(shù)的標準差， Sx2為第二次測驗的標準差。 (三 ) 同質信度的估計方法 (1)斯皮爾曼 —布朗公式法 rhh=(Σ XoXe/NMoMe)/SoSe r=2 rhh/(1+ rhh) (2)弗拉南根公式 r=2[1(Sa2+Sb2)/S2] (3)盧龍公式 r=1Sd2/S2 Sd 為 (XoXe)的標準差。 2. 庫德 理查遜公式法 r=[n/(n1)][(S2Σ pq)/S2] n為項目數(shù)， S2為測驗總分方差， p為項目難度， q=1p. 3. α 系數(shù)法 α = [n/(n1)][(S2Σ Si)/S2] Si為第 i個項目得分的標準差 (四 ) 評分者信度的估計方法 W=[Σ R2i(Σ Ri)2]/[(1/12)K2(N3N)] W為肯德爾和諧系數(shù)，這里為評分者信度系數(shù)， Ri為第 i份試卷評分等級之和， K為評分者人數(shù)， N為試卷數(shù)。 三、影響信度的因素 (一 )分數(shù)分布范圍與信度 分數(shù)分布范圍越廣，信度越高 (二 )測驗長度與信度 測驗長度越長，信度越高 n=rnn(1r11)/r11(1rnn) (三 )測題難度與信度 難度 → 分數(shù)分布 → 信度 大或小 → 小 → 低 適中 → 大 → 高 第四節(jié) 測驗效度 一、測驗效度的概念 二、測驗效度的類型 三、測驗效度的估計方法 四、信度與效度的關系 五、影響放度的因素 一、測驗效度的概念 (一 )效度的描述定義 效度（ Validity)是指測驗有效地測量到其所要測量的目標的程度。即測驗測量準確與否的指標。 (二 )效度的數(shù)理定義 Val=Sv2/S2 S2=Sv2+Si2+Se2 Val為效度系數(shù)， S2v為有效方差， S2為總方差。 二、測驗效度的類型 (一 )效標效度 (實證效度 ) 測驗分數(shù)與效標之間的一致性程度。 效標即衡量測驗測量準不準的標準或尺子。 效標必須具備有效性、可靠性、可操作性和實用性等條件。 (二 )內容效度 測驗試題取樣的適當性和代表性。 (三 )構想效度 (結構效度 ) 測驗結果與理論構想的一致性程度。 三、效度的估計方法 (一 )效標效度的估計 (1)積差相關 r= (Σ X1X2/NM1M2)/S1S2 (2)等級相關 r=16Σ D2/[n(n21)] t=(MHML)/√S H2/nH+SL2/nL 正命中率 =工作成功 /測驗成功 總命中率 =命中 /(命中 +失誤 ) 三、效度的估計方法 (二 )內容效度的估計方法 由專家通過邏輯分析進行評估判斷 (三 )構想效度的估計方法 因素分析方法 相容效度方法，即用一個權威測驗與新測驗求相關。 四、效度與信度的關系 (一 )信度是效度的必要條件，但不是充分條件。 (二 )信度系數(shù)的平方根是效度系數(shù)的最高限度。即 : R效 =√r 信 五、影響效度的因素 (一 )測驗本身的因素 (二 )測驗實施過程中的因素 (三 )被試方面的因素 、動機、情緒、態(tài)度 ：疲勞、饑餓、疾病等。 概化理論 (Generalizability Theory) 第一節(jié) 概化理論產(chǎn)生的背景及概念框架 第二節(jié) 概化理論研究實例 第一節(jié) 概化理論產(chǎn)生的背景及 概念框架 一、產(chǎn)生背景 二、概化理論的主要概念 三、概化理論的誤差分析 一、產(chǎn)生背景 (一 )概化理論產(chǎn)生的時間與標志 1. 時間 : 20世紀 60年代后期 2. 標志 : Cronbach等人的系列論文與專著 (二 )概化理論產(chǎn)生的原因 概化理論是針對經(jīng)典測量理論的不足提出的 經(jīng)典測量理論對測測誤差只是一個籠統(tǒng)的概念沒有區(qū)分各種原因造成的誤差及其比例。 概化理論是對經(jīng)典測量理論的拓展，主要對誤差進行了分折。 (三 )概化理論與經(jīng)典測量理論的不同 1. CTT的信度是建立在平行測驗基礎上的而GT則是建立在隨機平行測驗基礎上的。 2. CTT只考慮單一籠統(tǒng)的誤差，而 GT則將誤差依測試條件進行分解 ,進行方差分析。 3. CTT中使用信度系數(shù) , GT中使用 G系數(shù)。 二、概化理論中的主要概念 (一 )測量傾面 指影響測量目標的主要因素 : 指處于不同條件和狀態(tài)下的側面。如測驗題型、評分員等作為測量側面，而不同題型 (如記敘文、說明文、論述文 )和不同評分者為不同側面水平。 ：指側面水平的全體。 (二 )GT設計 1. 交叉型 (crossed) (nested) 3. 混合型 同一批被試 (P)考相同的一批題目 (i) 被試 (P) 1 2 3 …… .N 試題 (i) 1 2 3…… ..M P*i 2. 嵌套型 不同章節(jié)含有不同的試題 試題 (i) 1 2… h1 h1+1 … h2 h2+1… h3.. 章節(jié) (h) 1 2 3 i： h 既有交叉型，又有嵌套型 評分員 (r) 1 2 3 被 試 (p) 1 2 3 4 5 6 作文試題 (i) 1 2 i*(p： r) (三 ) 方差分類 1. 真方差 測量目標效應形成的方差，如學生作文水平的方差。 它是所有含有測量目標的交互效應的方差除以各水平數(shù)之后的和。 除真方差以外所有方差除以各自水平數(shù)后的和。 (四 ) G研究和 D研究 (1)確定測量目標及測量側面 (2)進行初始測驗研究設計 (3)收集測驗數(shù)據(jù) (4)進行方差分量估計 (各效應和交互作用的方差 ) (1)修改設計方案 (2)估計 G系數(shù) 三、概化理論的研究步驟 (一 )確定研究問題 (二 )測量設計 (三 )被試選取 (四 )G研究 (五 )D研究 (二 ) 測量設計 (五 ) D研究 D研究 D研究 項目反應理論 第一節(jié) 項目反應理論概述 第二節(jié) 項目反應模型 第三節(jié) 信息函數(shù) 第四節(jié) 項目反應理論的新進展 第五節(jié) 項目反應理論的應用 第一節(jié) 項目反應理論概述 一、項目反應理論產(chǎn)生的原因 二、項目反應理論的基本概念 三、項目反應理論的歷史回顧 四、項目反應理論的基本假設 五、項目反應理論的特點 六、項目反應理論的優(yōu)點 一、項目反應理論產(chǎn)生的原因 經(jīng)典測量理論的局限性 二、項目反應理論的基本概念 1. 潛在特質 ：以潛在特質為橫坐標，以正確反應或肯定反應的概率為縱坐標，以此反應項目基本特征的一條曲線。 、項目區(qū)分度和猜測參數(shù) 三、項目反應理論的歷史回顧 1952年洛德的博士論文 《 關于測驗分數(shù)的一種理論 》 1957~1958年 1960年 《 心理測驗分數(shù)的統(tǒng)計理論 1968年 1980年 1990年后 四、項目反應理論的基本假設 正確假設 五、項目反應理論的特點 六、項目反應理論的優(yōu)點 一組項目 估計精度