第九章測驗質(zhì)量分析-wenkub.com
2025-01-07 22:27 本頁面
【正文】 試卷 教師 A 教師 B 1 1 2 2 2 1 3 3 3 4 4 5 5 5 4 6 6 6 ? 七、通過某項測驗從 80名候選人中選出30名聘為學(xué)生助理，一年后進行考核表明，其中有 24人勝任工作， 6人不勝任。該題滿分為 12分。 ? 被試樣本的影響 。 ? 題目數(shù)量的影響 。例如把新編制的智力測驗的結(jié)果與斯坦福一一比奈智力量表 ? 的測驗結(jié)果相比較，若兩種測驗結(jié)果的相關(guān)高，可以認為新編測驗也具有較高的結(jié)構(gòu)效度。然后收集材料(這里主要是通過智力測驗獲得 )來驗證假設(shè)。 如果根據(jù)這種理論編制的智力測驗 ， 確實能測量出應(yīng)試者的判斷 、 理解和推理能力 ， 就可以認為所編制的測驗具有結(jié)構(gòu)效度 。 BABPPC ??? 錄取人數(shù)成功人數(shù) 例如：將上表中各數(shù)據(jù)代入公式： ? 錄取學(xué)生的正命中率為 ，說明入學(xué)測驗的預(yù)測度性較高。 例如，原測驗分數(shù)可以分成錄取和不錄取兩類，效標資料可分為成功與失敗兩類，這樣全部被試可分為四個組，如下表所示 ： 效 標 成 績 失敗 成功 測 驗 成 績 錄取 失誤 (A) 命中 (B) 不錄取 命中 (C) 失誤 (D) 上表中，在測驗分數(shù)中錄取的正確決定為命中，不正確決定為失誤，取舍正確性的指標，可用以下公式求得： ? 式中： PCT為取舍正確性比率，也稱總命中率。 估計 效標關(guān)聯(lián) 效度的主要方法有： ? （ 1）相關(guān)法 ? 它是以相關(guān)系數(shù)作為效度系數(shù)（ validity coefficient）的估計值。 預(yù)測效度和同時效度有兩點區(qū)別： ? (1)從進行本測驗到獲得效標的間隔時間不同。 (Criterion related validity) ?效標關(guān)聯(lián)效度指的是測驗分數(shù)與效標分數(shù)之間的一致性程度 。 （ 2）統(tǒng)計分析法 ? 統(tǒng)計分析法又稱 克龍巴赫估計法 。 二 、 效度的統(tǒng)計學(xué)原理 rxy=S2v/ S2X 式中， S2v潛在真分數(shù)方差； S2x實得分數(shù)方差。 ? 測驗難度的影響。 ????TKNNKSW)(121 3212)( 3? ??nnT 例如：三位教師評四份試卷，所評等級如下表，問該測驗的評分者信度如何？ 教師 試卷 1 2 3 4 A 3 1 4 2 B 2 1 4 1 C 2 2 3 2 Ri 7 4 11 5 解題步驟： （ 1）先計算 ΣRi和 ΣRi2 ?ΣRi=7+4+11+5=27 ?ΣRi2 =72+42+112+52=211 （ 2）計算 S 4)27(2112???S （ 3）計算 ΣT 223???BT 21233 3 ???C?????? TTT （ 4）代入公式 W )44(312132??????W （ 5）查表，檢驗 W的顯著性 ? 因為， K=3， N=4時，臨界值 ≈， ? 由于 S＜ ，所以， W不顯著性，即表明三位教師的評分者信度較低。 ? 評分者信度的估計可以分為兩種情況： ? （ 1） 2人同時評多份相同的試卷 ? 這種情況可以用 2人評分的相關(guān)系數(shù)作為評分者信度的估計值。 題號 被試 Si2 A B C D E 1 7 11 8 11 11 2 6 9 7 8 9 3 6 10 6 8 9 4 8 11 6 8 3 5 7 11 8 11 11 6 7 11 8 11 11 合計 41 63 43 57 54 20 解題步驟如下： 求 各被試在第 i題得分的方差 Si2 。測驗越同質(zhì)，同質(zhì)性信度的值也越大，則說明試題的內(nèi)部一致性程度越高。 hhhhtt rrr??12
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號-1