【正文】 的試題應該是所有高分組的學生都答對，而低分組的學生都答錯，此時， D值為 1；相反則 D值為 1； ? 常模參照評價而言， D值愈大，學生得分便愈分散，相應地，試卷標準差（ SD）也比較大，試題品質較高，信度也較大。 ? 在學習成就評價上，我們通常以一定的標準來評價（ P227表 105）。 鑒別指數(shù) 題目性能 很好 良好，修改會更佳 尚可，仍需修改 差，必須淘汰 ? （二）試卷的基本描述統(tǒng)計分析 ? 1．平均數(shù)（ mean） ? 2．標準差（ standard deviation） ? 3．相關性分析（ correiation Study） ? （三）試卷的信度分析 ? 信度 是指評價的結果（分數(shù)）與其擬評測的學習成就的一致性。 ? 評估信度的 資料來自評價的結果 而非評價工具本身。 ? 當我們要評估某一評價工具所測得的結果（分數(shù)）的信度有多大時，便往往通過觀察本次評價結果（分數(shù)）是否與其他類似目標的評價結果，（即另一次評價的分數(shù)）一致來判斷，若一致性頗高（即高分者仍得高分，低分者仍是低分），便可認為該評價結果（分數(shù)）應可測得學生的真正學習成就。 ? 影響評價結果信度的因素： – 試題的數(shù)量 – 分數(shù)的分散度 – 試題的難度 – 試題的區(qū)分度 – 評價工具的客觀性 ? 2．信度系數(shù)的估算方法 ? （ 1）重測法 ：以同一份試卷測一群學生兩次 ? （ 2）對等法 ：制作兩份在內(nèi)容、難度和題型上盡可能類似的試卷 ? （ 3）分半法：在實施測驗之后，將每一份試卷的奇數(shù)和偶數(shù)題分別計分 ? （ 4）庫李法 ： KR20和 KR21 ? 提高測驗信度的方法 – 適當增加測驗長度； – 與能力有關的測驗，其難易程度要適中； – 測驗的內(nèi)容不應過于復雜； – 測驗的實施和評分方法要標準化。 ? （四）試卷的效度分析 ? 效度 （ validity）是指測驗分數(shù)的正確性。就是指一個測驗能夠測量到它所想要測量的特質的程度。 ? 就學習成就評價的范圍來說，所謂效度是指評價工具是否精確地測出了該工具期望評測的成就。 ? 評定內(nèi)容效度的方法 – 首先，請所測學科的專家檢查雙向細目表是否符合課程大綱或課程標準的要求，各章節(jié)的內(nèi)容比例是否合理； – 然后，然后對測驗題目與雙向細目表進行比較，如果吻合程度高，則內(nèi)容效度高。 ? 實際工作中需要 注意 下列事項（ P230）： ? 1. 答題說明應明確詳盡，使學生不至于有任何混淆或誤會。 ? 2．編題所用的詞匯和句子不可艱澀深奧，以致學生因無法看懂而無從下筆答題。 ? 3．語意要清楚明確，不可稍有模糊。 ? 4．試題數(shù)量不可太少。 ? 5．編題時不可有意無意地在題目中提供任何與答題有關的線索，導致學生猜題。 ? 6．試題難度應適當。 ? 7．試題應盡可能評側重要的概念、思考過程、知識的理解、分析和綜合，而不宜故意設置陷階，評測一些瑣碎、零星的記憶性知識。 ? 8．試題的排列次序應先易后難，以免學生花大多時間在較難的題目上，以致時間不足而放棄了一些容易的試題。 ? 9．信度是效度的必需條件，因此，效度高的評價、首先信度要夠。 ? 10．同一試卷重復使用多次，效度會逐漸降低。 第四節(jié) 實作評價 ? 實作評價 可定義為：具相當評價專業(yè)素養(yǎng)的教師，編擬與學習成果應用情境相類似的仿真測驗情境，或真實的測驗情景，讓學生表現(xiàn)所知、所能的學習成果的評價過程。 ? 實作評價的 重點 ，通常是放在實際表現(xiàn)的過程、作品或這兩者的組合上，具體情況視實際表現(xiàn)活動的性質而定。 – 在教學之初，教師會比較重視正確的表現(xiàn)過程；學生逐漸熟悉正確的表現(xiàn)過程后，則會將注意力逐漸轉移到強調(diào)完成作品的品質上。 ? 介于評價認知能力所用的紙筆測驗和將學習成果應用于真實情境中的表現(xiàn)二者之間。 實作評價的特點 一、實作評價的類型 ? 根據(jù)施測情境的 真實性程度 來分 ： ? （一）紙筆表現(xiàn) ? （二）辨認測驗 ? （三）結構化表現(xiàn)測驗 ? （四）仿真表現(xiàn) ? （五）樣品模板 二、實作評價的實施步驟 ? （一）確立實作評價的目標 ? 典型的方法是使用 工作或作業(yè)分析 來確認影響表現(xiàn)的最重要的特殊因素是什么，或明確地列出更細節(jié)的表現(xiàn)行為是什么。 ? （二）確認實作評價的標準 ? ，實作評價應該將其重點放在 過程 評價上： – ①沒有作品成果可以產(chǎn)生，或作品成果評價不可行。 – ②過程能夠排序，并且可以直接進行觀察； – ③正確的過程對最后的成功有重大作用； – ④過程步驟的分析有助于提高成果品質。 ? 作品或成果 的評價上適合下列情況： – ①不同的過程可以導致相同的作品或成果； – ②無法提供過程的觀察資料； – ③學生對表現(xiàn)過程和步驟已經(jīng)駕輕就熟； – ④作品或成果具有可被辨認及判斷的品質。 ? ，過程及作品成果二者都是構成表現(xiàn)的兩個重要層面，缺一不可，并且二者都可以被觀察得到，此時，實作評價應該強調(diào)何者，應視被評定的技能及技能 發(fā)展階段 而定。 ? 為了達到明確界定表現(xiàn)標準，教師可參考下列 建議 ： ? ①確認即將被評價的整體表現(xiàn)或作業(yè)之前，教師自己先實際表現(xiàn)看看，然后記錄及研究自己的表現(xiàn)或任何可能的表現(xiàn)成果。即教師先做預試，并將可能的情況記載下來。 ? ②列出構成這些表現(xiàn)或成果的重要方面和因素，它們是指導進行觀察和評價的表現(xiàn)標準。 ? ③將這些表現(xiàn)標準的數(shù)量，限制在 10～ 15個之間，以方便進行觀察和判斷。 ? ④如果可能的話，集合一群教師共同決定一項作業(yè)應該包含哪些重要的表現(xiàn)標準。 ? ⑤以可觀察到的、測量到的及進行數(shù)字量化的學生行為或成果特質等術語，來界定表現(xiàn)標準。 ? ⑥不要使用含糊不清的字眼（如：正確地、適當?shù)?、良好的）來混淆表現(xiàn)標準的意義。 ? ⑦依序排列表現(xiàn)標準，以方便進行觀察和判斷。 ? ⑧檢查是否已有現(xiàn)成的實作評價工具，若沒有的話，再自行編制。 ? （三）提供適當?shù)谋憩F(xiàn)情境 ? 可以是教室內(nèi)自然發(fā)生的，也可以是教師特別設計仿真真實的情境； ? 判斷原則： – 教室中自然發(fā)生的表現(xiàn)頻率：不頻繁則設計 – 依據(jù)評價所做決定的重要性：重要性大，評價情境要結構化 ? 到底需要多少信息才能作出決定：收集多次資料是必需的 ? （四）確定計分和評定的方法 ? 整體評分法 – 評價只是決定一般性質 ? 分析評分法 – 是診斷學習困難及了解學生熟練表現(xiàn)水準 三、實作評價的方法 ? 實作評價的方法 ：是指可以用來收集和記錄學生表現(xiàn)行為的工具。 ? （一）系統(tǒng)的觀察和軼事記錄 – 自然情境下觀察學生表現(xiàn)；通常依據(jù)檢核表和評定量表進行。 ? （二）檢核表 – 是一組列出表現(xiàn)或成果的測量維度，并提供簡單記錄和判斷的資料表 ? （三）評定量表 – 評定某個表現(xiàn)出現(xiàn)頻率大小，屬于連續(xù)性變量資料。 ? （四）作品量表 – 是一列反映不同品質程度的樣本作品；使用整體判斷法 ? （五）檔案夾 – 用以顯示有關學生學習成就或持續(xù)進步信息的一連串資料的匯集。使用整體評分法或分析評分法。