【文章內(nèi)容簡介】 獲得的信度系數(shù)。通常的方法是在測驗(yàn)實(shí)施后將測驗(yàn)分為等值的兩半，并分別計(jì)算每位被測者在兩半測驗(yàn)上的得分，再求出這兩個(gè)分?jǐn)?shù)的相關(guān)系數(shù)。這個(gè)相關(guān)系數(shù)就代表了兩半側(cè)眼內(nèi)容取樣的一致性程度。 ? 同質(zhì)性信度 ——α系數(shù)分析，是指測驗(yàn)內(nèi)部的各題目在多大程度上考察了同一內(nèi)容，即所有測驗(yàn)題目測量的只是單一特質(zhì)或內(nèi)容，表現(xiàn)為所有測驗(yàn)題目得分的一致性。 評分者信度（ raters reliability） ? 在有些測量情形中，評分者的評判也是誤差的來源之一。例如投射測驗(yàn)、創(chuàng)造力測驗(yàn)、無領(lǐng)導(dǎo)小組討論、管理者情境模擬等，都依賴于評分者的判斷，這種判斷的主觀性往往造成不同評分者的評分很不一致，因此有必要考慮評分者信度。 ? 評分者信度是指不同評分者對同一對象進(jìn)行評定時(shí)的一致性。最簡單的估計(jì)方法就是隨機(jī)抽取若干份答卷，由兩個(gè)獨(dú)立的評分者打分，再求每份答卷兩個(gè)評判分?jǐn)?shù)的相關(guān)系數(shù)。評分者的評分越一致，評分者信度越高。（等級相關(guān)） 信度小結(jié)： ? 各種信度評估的適用情景： – 重測信度評估側(cè)重考察測評跨時(shí)間的一致性和穩(wěn)定性； – 復(fù)本信度評估側(cè)重考察測評跨形式的一致性和等值性； – 內(nèi)部一致性信度評估主要反映的是一個(gè)測評內(nèi)部題目之間的關(guān)系，揭示測評的各個(gè)題目是否測量了相同的內(nèi)容或特質(zhì)。 – 評分者信度評估主要是考察評分者的主觀誤差。 思考題： ? 與對某人品德測評分?jǐn)?shù)的可靠性進(jìn)行考察，隨機(jī)抽取其中 10個(gè)被試的分?jǐn)?shù)，分別是： 7 7 80、8 7 7 7 6 7 74，再次測評后 10個(gè)被試的分?jǐn)?shù)分別是： 8 7 8 8 8 88 8 80、 87。請問可以用什么方法評價(jià)測評的可靠性？ ? 如果一個(gè)部門的三個(gè)經(jīng)理分別給部門的幾十位員工考核，你認(rèn)為應(yīng)當(dāng)怎樣檢查三位評分者評定的可靠性？ ? 某面試考官對被試的 7項(xiàng)素質(zhì)進(jìn)行測評，總共面試了 8位被測者，其評定等級如下表，請考評一下這位面試考官的面試結(jié)果是否可靠？ 測評項(xiàng)目 被測者 1 2 3 4 5 6 7 A 3 6 5 1 4 2 7 B 5 6 4 1 3 2 7 C 2 7 5 1 4 3 6 D 3 6 7 2 4 1 5 E 4 7 6 2 3 1 5 F 4 5 6 2 3 1 7 G 3 7 4 2 5 1 6 H 2 7 4 1 6 3 5 Ri 26 51 41 12 32 14 48 52 測量的效度 521 效度及其影響因素 效度的概念 效度與信度的關(guān)系 效度的作用 效度的影響因素 522 效度的評估方法 內(nèi)容效度 content validity 效標(biāo)關(guān)聯(lián)效度 criterionrelated validity 構(gòu)想效度 construct validity 效度的概念 ? 效度的概念 ? 測量結(jié)果的效度就是指測量的有效性， 是與測量目的有關(guān)的真實(shí)變異數(shù)與總變異數(shù)的百分比 。 ? 一般被定義為測驗(yàn)?zāi)軠y量到所要測量東西的程度。在評價(jià)任何測驗(yàn)時(shí)這都是最重要的考慮。 ? “效度指從分?jǐn)?shù)進(jìn)行推論的證據(jù)的程度?！?——英國 《 教育和心理測驗(yàn)標(biāo)準(zhǔn) 》 2 效度與信度的關(guān)系 ? 二者的區(qū)別：信度與效度的差別在于所考慮的誤差不同。信度考慮的是隨機(jī)誤差的影響；效度考慮的誤差包括隨即誤差和對測驗(yàn)?zāi)康臒o關(guān)的變量引起的系統(tǒng)誤差。 ? 例如游標(biāo)卡尺的精度，可能由于設(shè)計(jì)原因或者工具制作工藝、刻度刻畫、金屬材料的溫度特性等因素的影響，卡尺對長度的反映會(huì)出現(xiàn)誤差。這些誤差現(xiàn)象是由于測量工具本身的原因造成的，具有穩(wěn)定性，不管什么人、什么時(shí)間使用都會(huì)出現(xiàn)。而另一方面，每次使用卡尺，不同的人造成的誤差不同，這種誤差是隨機(jī)誤差，是偶然性的不穩(wěn)定的，屬于信度考察的內(nèi)容，指的是測量結(jié)果的一致性如何。 ? 二者的聯(lián)系：信度是效度的必要條件，但不是充分條件。換句話說，信度高不一定效度必然高。但效度高必定信度高。 效度的作用 ? 就好像用磅秤測量身高，每次測量的結(jié)果都很一直穩(wěn)定（信度很高），但它并不能代表身高，也就是說其測量值并不反映身高這一屬性（效度很低），所以說，磅秤不是身高這一測量對象的適宜測量工具。 ? 例如一個(gè)數(shù)學(xué)測驗(yàn)可能對學(xué)生的數(shù)學(xué)成績的預(yù)測效度很好，但對學(xué)生整體智力的預(yù)測效度就沒有那么好，對學(xué)生的性格可能根本就沒有預(yù)測效度。 效度的影響因素 ? 一個(gè)測驗(yàn)效度的高低，很大程度上取決于該測驗(yàn)受無關(guān)因素影響的程度。凡是能造成測驗(yàn)結(jié)果誤差的因素，都會(huì)影響測驗(yàn)效度。 – 測驗(yàn)題目的質(zhì)量：難易程度、暗示性、題意表達(dá)、試題內(nèi)容取樣的代表性 – 實(shí)施測驗(yàn)時(shí)的干擾因素：指導(dǎo)語、計(jì)分錯(cuò)誤 – 被試的影響因素：反應(yīng)定勢、測驗(yàn)動(dòng)機(jī)、情緒 – 測驗(yàn)的長度：增加測驗(yàn)題目往往能增加測驗(yàn)的信度和效度。 522 效度的評估方法 ? 對測量效度的考察反映在下面兩個(gè)問題之中： – 該測驗(yàn)?zāi)軌蚝芎玫念A(yù)測我們感興趣的成績嗎？ – 該測驗(yàn)真正測量的是什么？ ? 第一個(gè)問題集中于效標(biāo)，也就是判斷一個(gè)測驗(yàn)預(yù)測的成功性的標(biāo)準(zhǔn)。這就要求建立測驗(yàn)成績與那個(gè)標(biāo)準(zhǔn)之間的關(guān)系。（預(yù)測效度） ? 第二個(gè)問題集中于測驗(yàn)，要求明確關(guān)于測驗(yàn)所測量目標(biāo)的內(nèi)在理論或心理構(gòu)想。（內(nèi)容效度） ? 測驗(yàn)效度不能按籠統(tǒng)的方式去測量，而只能根據(jù)測驗(yàn)所考慮的特定用途去測量，在決定是否使用測驗(yàn)時(shí)，我們需要了解從已知測驗(yàn)結(jié)果做出某種推論的有效性，也就是說，我們是證實(shí)測驗(yàn)的有效性，還是證實(shí)我們希望對測驗(yàn)結(jié)果進(jìn)行推論的有效性。對于一個(gè)特定問題，測量目的決定了所用的效度評定方法，問題是關(guān)于使用測驗(yàn)成績來預(yù)測在校標(biāo)上的成績，還是關(guān)于研究測驗(yàn)實(shí)際測量的內(nèi)容或構(gòu)想。 內(nèi)容效度 content validity ? 內(nèi)容效度 是一個(gè)測驗(yàn)實(shí)際測到的內(nèi)容與所要測量的內(nèi)容之間的吻合程