【正文】 的試題應(yīng)該是所有高分組的學(xué)生都答對(duì)，而低分組的學(xué)生都答錯(cuò)，此時(shí)， D值為 1；相反則 D值為 1； ? 常模參照評(píng)價(jià)而言， D值愈大，學(xué)生得分便愈分散，相應(yīng)地，試卷標(biāo)準(zhǔn)差（ SD）也比較大，試題品質(zhì)較高，信度也較大。 ? 在學(xué)習(xí)成就評(píng)價(jià)上，我們通常以一定的標(biāo)準(zhǔn)來(lái)評(píng)價(jià)（ P227表 105）。 鑒別指數(shù) 題目性能 很好 良好，修改會(huì)更佳 尚可，仍需修改 差，必須淘汰 ? （二）試卷的基本描述統(tǒng)計(jì)分析 ? 1．平均數(shù)（ mean） ? 2．標(biāo)準(zhǔn)差（ standard deviation） ? 3．相關(guān)性分析（ correiation Study） ? （三）試卷的信度分析 ? 信度 是指評(píng)價(jià)的結(jié)果（分?jǐn)?shù)）與其擬評(píng)測(cè)的學(xué)習(xí)成就的一致性。 ? 評(píng)估信度的 資料來(lái)自評(píng)價(jià)的結(jié)果 而非評(píng)價(jià)工具本身。 ? 當(dāng)我們要評(píng)估某一評(píng)價(jià)工具所測(cè)得的結(jié)果（分?jǐn)?shù)）的信度有多大時(shí)，便往往通過(guò)觀察本次評(píng)價(jià)結(jié)果（分?jǐn)?shù)）是否與其他類(lèi)似目標(biāo)的評(píng)價(jià)結(jié)果，（即另一次評(píng)價(jià)的分?jǐn)?shù)）一致來(lái)判斷，若一致性頗高（即高分者仍得高分，低分者仍是低分），便可認(rèn)為該評(píng)價(jià)結(jié)果（分?jǐn)?shù)）應(yīng)可測(cè)得學(xué)生的真正學(xué)習(xí)成就。 ? 影響評(píng)價(jià)結(jié)果信度的因素： – 試題的數(shù)量 – 分?jǐn)?shù)的分散度 – 試題的難度 – 試題的區(qū)分度 – 評(píng)價(jià)工具的客觀性 ? 2．信度系數(shù)的估算方法 ? （ 1）重測(cè)法 ：以同一份試卷測(cè)一群學(xué)生兩次 ? （ 2）對(duì)等法 ：制作兩份在內(nèi)容、難度和題型上盡可能類(lèi)似的試卷 ? （ 3）分半法：在實(shí)施測(cè)驗(yàn)之后，將每一份試卷的奇數(shù)和偶數(shù)題分別計(jì)分 ? （ 4）庫(kù)李法 ： KR20和 KR21 ? 提高測(cè)驗(yàn)信度的方法 – 適當(dāng)增加測(cè)驗(yàn)長(zhǎng)度； – 與能力有關(guān)的測(cè)驗(yàn)，其難易程度要適中； – 測(cè)驗(yàn)的內(nèi)容不應(yīng)過(guò)于復(fù)雜； – 測(cè)驗(yàn)的實(shí)施和評(píng)分方法要標(biāo)準(zhǔn)化。 ? （四）試卷的效度分析 ? 效度 （ validity）是指測(cè)驗(yàn)分?jǐn)?shù)的正確性。就是指一個(gè)測(cè)驗(yàn)?zāi)軌驕y(cè)量到它所想要測(cè)量的特質(zhì)的程度。 ? 就學(xué)習(xí)成就評(píng)價(jià)的范圍來(lái)說(shuō)，所謂效度是指評(píng)價(jià)工具是否精確地測(cè)出了該工具期望評(píng)測(cè)的成就。 ? 評(píng)定內(nèi)容效度的方法 – 首先，請(qǐng)所測(cè)學(xué)科的專(zhuān)家檢查雙向細(xì)目表是否符合課程大綱或課程標(biāo)準(zhǔn)的要求，各章節(jié)的內(nèi)容比例是否合理； – 然后，然后對(duì)測(cè)驗(yàn)題目與雙向細(xì)目表進(jìn)行比較，如果吻合程度高，則內(nèi)容效度高。 ? 實(shí)際工作中需要 注意 下列事項(xiàng)（ P230）： ? 1. 答題說(shuō)明應(yīng)明確詳盡，使學(xué)生不至于有任何混淆或誤會(huì)。 ? 2．編題所用的詞匯和句子不可艱澀深?yuàn)W，以致學(xué)生因無(wú)法看懂而無(wú)從下筆答題。 ? 3．語(yǔ)意要清楚明確，不可稍有模糊。 ? 4．試題數(shù)量不可太少。 ? 5．編題時(shí)不可有意無(wú)意地在題目中提供任何與答題有關(guān)的線索，導(dǎo)致學(xué)生猜題。 ? 6．試題難度應(yīng)適當(dāng)。 ? 7．試題應(yīng)盡可能評(píng)側(cè)重要的概念、思考過(guò)程、知識(shí)的理解、分析和綜合，而不宜故意設(shè)置陷階，評(píng)測(cè)一些瑣碎、零星的記憶性知識(shí)。 ? 8．試題的排列次序應(yīng)先易后難，以免學(xué)生花大多時(shí)間在較難的題目上，以致時(shí)間不足而放棄了一些容易的試題。 ? 9．信度是效度的必需條件，因此，效度高的評(píng)價(jià)、首先信度要夠。 ? 10．同一試卷重復(fù)使用多次，效度會(huì)逐漸降低。 第四節(jié) 實(shí)作評(píng)價(jià) ? 實(shí)作評(píng)價(jià) 可定義為：具相當(dāng)評(píng)價(jià)專(zhuān)業(yè)素養(yǎng)的教師，編擬與學(xué)習(xí)成果應(yīng)用情境相類(lèi)似的仿真測(cè)驗(yàn)情境，或真實(shí)的測(cè)驗(yàn)情景，讓學(xué)生表現(xiàn)所知、所能的學(xué)習(xí)成果的評(píng)價(jià)過(guò)程。 ? 實(shí)作評(píng)價(jià)的 重點(diǎn) ，通常是放在實(shí)際表現(xiàn)的過(guò)程、作品或這兩者的組合上，具體情況視實(shí)際表現(xiàn)活動(dòng)的性質(zhì)而定。 – 在教學(xué)之初，教師會(huì)比較重視正確的表現(xiàn)過(guò)程；學(xué)生逐漸熟悉正確的表現(xiàn)過(guò)程后，則會(huì)將注意力逐漸轉(zhuǎn)移到強(qiáng)調(diào)完成作品的品質(zhì)上。 ? 介于評(píng)價(jià)認(rèn)知能力所用的紙筆測(cè)驗(yàn)和將學(xué)習(xí)成果應(yīng)用于真實(shí)情境中的表現(xiàn)二者之間。 實(shí)作評(píng)價(jià)的特點(diǎn) 一、實(shí)作評(píng)價(jià)的類(lèi)型 ? 根據(jù)施測(cè)情境的 真實(shí)性程度 來(lái)分 ： ? （一）紙筆表現(xiàn) ? （二）辨認(rèn)測(cè)驗(yàn) ? （三）結(jié)構(gòu)化表現(xiàn)測(cè)驗(yàn) ? （四）仿真表現(xiàn) ? （五）樣品模板 二、實(shí)作評(píng)價(jià)的實(shí)施步驟 ? （一）確立實(shí)作評(píng)價(jià)的目標(biāo) ? 典型的方法是使用 工作或作業(yè)分析 來(lái)確認(rèn)影響表現(xiàn)的最重要的特殊因素是什么，或明確地列出更細(xì)節(jié)的表現(xiàn)行為是什么。 ? （二）確認(rèn)實(shí)作評(píng)價(jià)的標(biāo)準(zhǔn) ? ，實(shí)作評(píng)價(jià)應(yīng)該將其重點(diǎn)放在 過(guò)程 評(píng)價(jià)上： – ①?zèng)]有作品成果可以產(chǎn)生，或作品成果評(píng)價(jià)不可行。 – ②過(guò)程能夠排序，并且可以直接進(jìn)行觀察； – ③正確的過(guò)程對(duì)最后的成功有重大作用； – ④過(guò)程步驟的分析有助于提高成果品質(zhì)。 ? 作品或成果 的評(píng)價(jià)上適合下列情況： – ①不同的過(guò)程可以導(dǎo)致相同的作品或成果； – ②無(wú)法提供過(guò)程的觀察資料； – ③學(xué)生對(duì)表現(xiàn)過(guò)程和步驟已經(jīng)駕輕就熟； – ④作品或成果具有可被辨認(rèn)及判斷的品質(zhì)。 ? ，過(guò)程及作品成果二者都是構(gòu)成表現(xiàn)的兩個(gè)重要層面，缺一不可，并且二者都可以被觀察得到，此時(shí)，實(shí)作評(píng)價(jià)應(yīng)該強(qiáng)調(diào)何者，應(yīng)視被評(píng)定的技能及技能 發(fā)展階段 而定。 ? 為了達(dá)到明確界定表現(xiàn)標(biāo)準(zhǔn)，教師可參考下列 建議 ： ? ①確認(rèn)即將被評(píng)價(jià)的整體表現(xiàn)或作業(yè)之前，教師自己先實(shí)際表現(xiàn)看看，然后記錄及研究自己的表現(xiàn)或任何可能的表現(xiàn)成果。即教師先做預(yù)試，并將可能的情況記載下來(lái)。 ? ②列出構(gòu)成這些表現(xiàn)或成果的重要方面和因素，它們是指導(dǎo)進(jìn)行觀察和評(píng)價(jià)的表現(xiàn)標(biāo)準(zhǔn)。 ? ③將這些表現(xiàn)標(biāo)準(zhǔn)的數(shù)量，限制在 10～ 15個(gè)之間，以方便進(jìn)行觀察和判斷。 ? ④如果可能的話，集合一群教師共同決定一項(xiàng)作業(yè)應(yīng)該包含哪些重要的表現(xiàn)標(biāo)準(zhǔn)。 ? ⑤以可觀察到的、測(cè)量到的及進(jìn)行數(shù)字量化的學(xué)生行為或成果特質(zhì)等術(shù)語(yǔ)，來(lái)界定表現(xiàn)標(biāo)準(zhǔn)。 ? ⑥不要使用含糊不清的字眼（如：正確地、適當(dāng)?shù)?、良好的）?lái)混淆表現(xiàn)標(biāo)準(zhǔn)的意義。 ? ⑦依序排列表現(xiàn)標(biāo)準(zhǔn)，以方便進(jìn)行觀察和判斷。 ? ⑧檢查是否已有現(xiàn)成的實(shí)作評(píng)價(jià)工具，若沒(méi)有的話，再自行編制。 ? （三）提供適當(dāng)?shù)谋憩F(xiàn)情境 ? 可以是教室內(nèi)自然發(fā)生的，也可以是教師特別設(shè)計(jì)仿真真實(shí)的情境； ? 判斷原則： – 教室中自然發(fā)生的表現(xiàn)頻率：不頻繁則設(shè)計(jì) – 依據(jù)評(píng)價(jià)所做決定的重要性：重要性大，評(píng)價(jià)情境要結(jié)構(gòu)化 ? 到底需要多少信息才能作出決定：收集多次資料是必需的 ? （四）確定計(jì)分和評(píng)定的方法 ? 整體評(píng)分法 – 評(píng)價(jià)只是決定一般性質(zhì) ? 分析評(píng)分法 – 是診斷學(xué)習(xí)困難及了解學(xué)生熟練表現(xiàn)水準(zhǔn) 三、實(shí)作評(píng)價(jià)的方法 ? 實(shí)作評(píng)價(jià)的方法 ：是指可以用來(lái)收集和記錄學(xué)生表現(xiàn)行為的工具。 ? （一）系統(tǒng)的觀察和軼事記錄 – 自然情境下觀察學(xué)生表現(xiàn)；通常依據(jù)檢核表和評(píng)定量表進(jìn)行。 ? （二）檢核表 – 是一組列出表現(xiàn)或成果的測(cè)量維度，并提供簡(jiǎn)單記錄和判斷的資料表 ? （三）評(píng)定量表 – 評(píng)定某個(gè)表現(xiàn)出現(xiàn)頻率大小，屬于連續(xù)性變量資料。 ? （四）作品量表 – 是一列反映不同品質(zhì)程度的樣本作品；使用整體判斷法 ? （五）檔案夾 – 用以顯示有關(guān)學(xué)生學(xué)習(xí)成就或持續(xù)進(jìn)步信息的一連串資料的匯集。使用整體評(píng)分法或分析評(píng)分法。