素質(zhì)測評的質(zhì)量分析(存儲版)
【正文】 別計(jì)算每位被測者在兩半測驗(yàn)上的得分，再求出這兩個(gè)分?jǐn)?shù)的相關(guān)系數(shù)。（等級相關(guān)） 信度小結(jié)： ?各種信度評估的適用情景： ?重測信度評估側(cè)重考察測評跨時(shí)間的一致性和穩(wěn)定性； ?復(fù)本信度評估側(cè)重考察測評跨形式的一致性和等值性； ?內(nèi)部一致性信度評估主要反映的是一個(gè)測評內(nèi)部題目之間的關(guān)系，揭示測評的各個(gè)題目是否測量了相同的內(nèi)容或特質(zhì)。效度高的測量工具往往信度也高?！?—— 英國 《 教育和心理測驗(yàn)標(biāo)準(zhǔn) 》 效度與信度的關(guān)系 ?二者的區(qū)別： 信度與效度的差別在于 所考慮的誤差不同 。凡是能造成測驗(yàn)結(jié)果誤差的因素，都會(huì)影響測驗(yàn)效度。 ?內(nèi)容效度適合于選拔和分類人事測驗(yàn)，因?yàn)檫@類測驗(yàn)內(nèi)容是實(shí)際工作的一個(gè)樣本，應(yīng)包含實(shí)際工作所需要的技能和知識，通過內(nèi)容效度的分析來確定測驗(yàn)是否測量了實(shí)際工作中需要的知識和技能。（效標(biāo)是考察測驗(yàn)效用的外在參照標(biāo)準(zhǔn)。如：在校成績、學(xué)歷、研究成果等。但是每個(gè)構(gòu)想都有其心理上的理論基礎(chǔ)和客觀現(xiàn)實(shí)性，可以通過各種可觀察的材料加以確定。 ?定性分析：主要考慮內(nèi)容效度，即題目表達(dá)的恰當(dāng)性和有效性等方面。 ?測驗(yàn)作用：選拔性測驗(yàn)應(yīng)使難度接近錄取率。因?yàn)槭軠y者的表現(xiàn)總是發(fā)生在一定情境中，測驗(yàn)成績必然反映一定情境的作用。 。如何定義 “ 最好 ” 以及怎樣確保 “ 最好 ” 能夠被測量決定結(jié)果的公平性，這主要由測驗(yàn)的技術(shù)性方面來確定，是測驗(yàn)過程和測量效標(biāo)過程二者的函數(shù)。 ?測驗(yàn)?zāi)康模弘y度極大或難度極小時(shí)，都不容易區(qū)分個(gè)體差異。通過項(xiàng)目分析，對測驗(yàn)題目進(jìn)行選擇和修改，可以提高測驗(yàn)的信度和效度。所謂構(gòu)想通常指一些抽象的、假設(shè)性的概念或特質(zhì)，如智力、創(chuàng)造力、言語流暢性、焦慮等。 ?二者的差異根源不在于收集效標(biāo)的時(shí)間，而是在于預(yù)測目的的不同，預(yù)測效度多用于預(yù)測未來的結(jié)果，同時(shí)效度多用于診斷現(xiàn)在的狀態(tài)。 2）／ N247。 ?在實(shí)際工作中我們編制的測驗(yàn)不可能包含所要測量的行為領(lǐng)域的全部可能的材料或情境，只能選擇一個(gè)有代表性的樣本，通過觀察被試對個(gè)別題目的反應(yīng)，來推測他的總體行為表現(xiàn)。 ?例如 ,一個(gè)數(shù)學(xué)測驗(yàn)可能對學(xué)生的數(shù)學(xué)成績的預(yù)測效度很好，但對學(xué)生整體智力的預(yù)測效度就沒有那么好，對學(xué)生的性格可能根本就沒有預(yù)測效度。在評價(jià)任何測驗(yàn)時(shí)這都是最重要的考慮。效度的作用比信度的作用更為重要。最簡單的估計(jì)方法就是隨機(jī)抽取若干份答卷，由兩個(gè)獨(dú)立的評分者打分，再求每份答卷兩個(gè)評判分?jǐn)?shù)的相關(guān)系數(shù)。 例如 16PF人格測評就包括 16個(gè)分測評，每個(gè)分測評量表只對一種人格特質(zhì)進(jìn)行測評。也就是說，評估一組測驗(yàn)題目內(nèi)部一致性程度，對于確定測驗(yàn)題目是否測量了同一事物很重要。因?yàn)楸粶y者一旦知道答案就不容易忘記，從而造成假性相關(guān)。 應(yīng)用重測信度應(yīng)注意： ? 重測信度一般只反映由隨機(jī)因素導(dǎo)致的變化，而不反映被測者行為的長久變化。 信度系數(shù)類型 誤差來源 重測信度 時(shí)間取樣 復(fù)本信度（即時(shí)） 內(nèi)容取樣 重測復(fù)本信度（延遲） 時(shí)間和內(nèi)容取樣 分半信度 內(nèi)容取樣 同質(zhì)性信度 內(nèi)容的異質(zhì)性 評分者信度 評分者間差異 重測信度 (testretest reliability) ?又稱為 穩(wěn)定性系數(shù) ，是采用重測法計(jì)算信度的方法，即用同一測驗(yàn)在不同時(shí)間對同一對象施測兩次，兩次測量分?jǐn)?shù)的相關(guān)系數(shù)即為重測系數(shù)。 ?隨機(jī)誤差越大，信度就越低。 ? 其次，我們每一次測量都可能出現(xiàn)操作上的差異，或者由于不可預(yù)見的外界因素的影響，產(chǎn)生測量誤差。當(dāng)然這種誤差是必然存在的，而且誤差是在一定范圍中有規(guī)律的變動(dòng)的，這種誤差在測量工作中被稱之為 系統(tǒng)誤差（ systematic error） 。可以指出測驗(yàn)出的個(gè)體差異在多大程度上是真正的差異，又在多大程度上是由于隨機(jī)誤差造成的。 ?無法解釋的變化（隨機(jī)因素） ?猜測、運(yùn)氣，以及暫時(shí)的干擾 1212 信度的評估方法 ?針對不同的誤差來源，信度可以有不同的確定方法。例如人格測驗(yàn)一般間隔 26個(gè)月比較合適。 ? 只有不大容易受重復(fù)影響的測驗(yàn)，如感覺 運(yùn)動(dòng)測驗(yàn)或人格測驗(yàn)，才比較適合用重測法計(jì)算信度系數(shù)。 ? 同質(zhì)性是保證測評只測量同一特質(zhì)的必要條件。 ?在設(shè)計(jì)測評題目時(shí)，所有測評題目都要保證只測量一種特質(zhì)或內(nèi)容，如果需要在一個(gè)測評中測量不同內(nèi)容，就應(yīng)該將測評設(shè)計(jì)為幾個(gè)分測評進(jìn)行分別測評。 ?評分者信度是指不同評分者對同一對象進(jìn)行評定時(shí)的一致性。一般來說。 ?效度可以看作為對 有用性和準(zhǔn)確性 的測量，回答的是“對什么有用？”或“我怎么知道這個(gè)測驗(yàn)是否值得用？”的問題，一般被定義為 測驗(yàn)?zāi)軠y量到所要測量東西的程度 。 效度的作用 ?就好像用磅秤測量身高，每次測量的結(jié)果都很一直穩(wěn)定（信度很高），但它并不能代表身高，也就是說其測量值并不反映身高這一屬性（效度很低），所以說，磅秤不是身高這一測量對象的適宜測量工具。（內(nèi)容效度） 內(nèi)容效度 content validity ?內(nèi)容效度是一個(gè)測驗(yàn)實(shí)際測到的內(nèi)容與所要測量的內(nèi)容之間的吻合程度，是檢查測驗(yàn)內(nèi)容是否是所預(yù)測量的行為領(lǐng)域的代表性取樣的指標(biāo)。 確定內(nèi)容效度的方法 ?藍(lán)圖對照分析法： 1999年全國碩士研究生入學(xué)考試英語試卷結(jié)構(gòu)框架 ?專家比較判斷法： C＝（ n－ N247。適用于對人員進(jìn)行選拔、分類、安置的人事測量，這些測量需要對應(yīng)試者將來的工作績效進(jìn)行可靠的預(yù)測。 ?等級評定結(jié)果 ?前期測評結(jié)果 結(jié)構(gòu)效度 construct validity ?結(jié)構(gòu)效度是指測驗(yàn)?zāi)軌驕y量到
公司管理相關(guān)推薦
鄂ICP備17016276號-1