素質測評的質量分析(編輯修改稿)
2025-06-15 11:54 本頁面
【文章內容簡介】 情境模擬等，都依賴于評分者的判斷，這種判斷的主觀性往往造成不同評分者的評分很不一致，因此有必要考慮評分者信度。 ?評分者信度是指不同評分者對同一對象進行評定時的一致性。最簡單的估計方法就是隨機抽取若干份答卷，由兩個獨立的評分者打分，再求每份答卷兩個評判分數(shù)的相關系數(shù)。評分者的評分越一致，評分者信度越高。（等級相關） 信度小結： ?各種信度評估的適用情景： ?重測信度評估側重考察測評跨時間的一致性和穩(wěn)定性； ?復本信度評估側重考察測評跨形式的一致性和等值性； ?內部一致性信度評估主要反映的是一個測評內部題目之間的關系，揭示測評的各個題目是否測量了相同的內容或特質。 ?評分者信度評估主要是考察評分者的主觀誤差。 思考題： ?與對某人品德測評分數(shù)的可靠性進行考察，隨機抽取其中 10個被試的分數(shù)，分別是： 7 7 80、8 7 7 7 6 7 74，再次測評后 10個被試的分數(shù)分別是： 8 7 8 8 8 88 8 80、 87。請問可以用什么方法評價測評的可靠性？ ?如果一個部門的三個經(jīng)理分別給部門的幾十位員工考核，你認為應當怎樣檢查三位評分者評定的可靠性？ ?某面試考官對被試的 7項素質進行測評，總共面試了 8位被測者，其評定等級如下表，請考評一下這位面試考官的面試結果是否可靠？ 測評項目 被測者 1 2 3 4 5 6 7 A 3 6 5 1 4 2 7 B 5 6 4 1 3 2 7 C 2 7 5 1 4 3 6 D 3 6 7 2 4 1 5 E 4 7 6 2 3 1 5 F 4 5 6 2 3 1 7 G 3 7 4 2 5 1 6 H 2 7 4 1 6 3 5 Ri 26 51 41 12 32 14 48 122 測量的效度 ?效度是評價測量工具好壞的重要標準之一。較高的效度是一個良好的測量工具最重要的特性，是必要條件，也是選擇和評價測量工具質量的重要依據(jù)。一般來說。效度的作用比信度的作用更為重要。如果一個測驗效度很低，無論它的信度有多高，這項測驗都沒有應用價值。效度高的測量工具往往信度也高。 ?通過對效度的分析，可以了解對所要測量的心理學變量的測量準確程度如何，以及對外在標準的預測能力怎樣。效度高的測量工具，既能夠準確的測量出目標心理特質，又能夠根據(jù)測量結果做出正確的推論。 1221 效度及其影響因素 效度的概念 ?測量結果的效度就是 指測量的有效性 ，即能夠測量到所要測量目標的程度，反映了測量結果對測量目標的體現(xiàn)程度。效度的高低只有程度上的差別，不存在完全沒有或完全有的情況。 ?效度可以看作為對 有用性和準確性 的測量，回答的是“對什么有用？”或“我怎么知道這個測驗是否值得用？”的問題，一般被定義為 測驗能測量到所要測量東西的程度 。在評價任何測驗時這都是最重要的考慮。 ?“效度指從分數(shù)進行推論的證據(jù)的程度。” —— 英國 《 教育和心理測驗標準 》 效度與信度的關系 ?二者的區(qū)別： 信度與效度的差別在于 所考慮的誤差不同 。信度考慮的是隨機誤差的影響；效度考慮的誤差包括隨機誤差和對測驗目的無關的變量引起的系統(tǒng)誤差。 ?二者的聯(lián)系： 信度是效度的必要條件，但不是充分條件。換句話說，信度高不一定效度必然高。但效度高必定信度高。 效度的作用 ?就好像用磅秤測量身高，每次測量的結果都很一直穩(wěn)定（信度很高），但它并不能代表身高，也就是說其測量值并不反映身高這一屬性（效度很低），所以說，磅秤不是身高這一測量對象的適宜測量工具。 ?例如 ,一個數(shù)學測驗可能對學生的數(shù)學成績的預測效度很好，但對學生整體智力的預測效度就沒有那么好，對學生的性格可能根本就沒有預測效度。 效度的影響因素 ?一個測驗效度的高低，很大程度上取決于該測驗受無關因素影響的程度。凡是能造成測驗結果誤差的因素，都會影響測驗效度。 ?測驗題目的質量：難易程度、暗示性、題意表達、試題內容取樣的代表性 ?實施測驗時的干擾因素：指導語、計分錯誤 ?被試的影響因素：反應定勢、測驗動機、情緒 ?測驗的長度：增加測驗題目往往能增加測驗的信度和效度。 1222 效度的評估方法 ?對測量效度的考察反映在下面兩個問題之中： ?該測驗能夠很好的預測我們感興趣的成績嗎？ ?該測驗真正測量的是什么？ ?第一個問題集中于效標，也就是判斷一個測驗預測的成功性的標準。這就要求建立測驗成績與那個標準之間的關系。（預測效度） ?第二個問題集中于測驗，要求明確關于測驗所測量目標的內在理論或心理構想。（內容效度） 內容效度 content validity ?內容效度是一個測驗實際測到的內容與所要測量的內容之間的吻合程度，是檢查測驗內容是否是所預測量的行為領域的代表性取樣的指標。 ?在實際工作中我們編制的測驗不可能包含所要測量的行為領域的全部可能的材料或情境，只能選擇一個有代表性的樣本，通過觀察被試對個別題目的反應，來推測他的總體行為表現(xiàn)。 ?應用范圍：主要應用于成就測驗、職業(yè)選拔和分類人事測驗。 ?內容效度適合于選拔和分類人事測驗，因為這類測驗內容是實際工作的一個樣本，應包含實際工作所需要的技能和知識，通過內容效度的分析來確定測驗是否測量了實際工作中需要的知識和技能。 ?內容效度一般不適用于能力傾向測驗和人格測驗，因為這類測驗不太要求與所取樣的行為領域的內在相似性，其測驗
公司管理相關推薦
鄂ICP備17016276號-1