【文章內容簡介】 效度的方法 ? 控制系統(tǒng)誤差 ? 精心編制測驗量表 ? 擴充樣本的容量和代表性 ? 合理處理效度和信度的關系 ? 妥善組織測驗 ? 適當增加測驗長度 三、難度 ? 難度是指試題的難易程度。 ? 一道試題，如果大部分被試都能答對，則該題的難度就??；如果大部分被試都不能答對，則該題的難度就大。 ? 一個題目的難度大小，除了所測的內容本身的難易程度有關以外，還與測驗的編制技術和被試的知識經(jīng)驗有關，由于學得不清楚或者因被試沒學過，一個本來容易的題可能變難。這就是說測驗的難度具有相對性，正因為此，必須讓試題通過實踐來對難度作出檢驗。 難度的計算 ? （一）基本公式 ?客觀題難度的計算 ? P=R/N ? R為答對該試題人數(shù)， N為參加測驗總人數(shù) ? 例 1：在 100個學生中，答對第一題的 30人，答對第二題的 60人，求第一、二道題的難度？比較這兩道題誰比誰難？ 主觀題難度的計算 ? 例 2： 某道論述題滿分 12分，所有考生在這道題上的平均得分為 ，求該題的難度？ ? 例 3：語文測驗第五題最高得分為 12分，這道題考生的平均得分是 ，求該題難度？ ? 例 4： 60人參加考試，某題滿分為 12分，正確得分累積是 480分，求該題難度？ （ 2）極端分組法 ? 步驟： ? 將測驗總分進行高低排序（由高到低） ? 進行高低分組（各取 27%），并計算某題的得分率 ? 求兩組的平均值 ? 公式： ? P=（ PH+PL） /2 ? PH為高分組答對該題的百分比； ? PL為低分組答對該題的百分比。 例 5 ? 某區(qū)域 1000人參加考試，試卷第一題高分組 180人答對，低分組 60人答對，求該題難度？ ? 如果該題滿分為 10分，高分組得分總數(shù)為 2100分，低分組得分總數(shù)為 830分，求該題難度？ 難度的分析與控制 ? （ 1）難度分析 ? 進行難度分析的主要目的是為了篩選題目。 ? A、測驗題目難度水平的確定 ? 測驗題目難度水平的適當與否，取決于測驗的目的、性質和題目的形成。 ? 當 P值接近于 0或接近于 1時，即被試在該題上全部答對或全部答錯，則該題無法提供個體的信息。而只當 P值接近于 ，題目才能把被試做最大的程度的區(qū)分。但在實際工作中，若每一題的難度值均為 ，那么此測驗很可能只能區(qū)分出好與差兩種極端被試的差異，卻不能對各種被試作更精確的區(qū)分。因此，一般各題的難度可在+20之間。 B、測驗難度對分數(shù)分布的影響 ? 測驗的難度直接依賴于組成測驗的題目的難度，通過考察測驗分數(shù)的分布，可以對測驗的難度做出直觀檢查。 ? 由于多數(shù)人的心理特性多數(shù)呈正態(tài)分布，因此當測驗目的在于測量個體差異時，若被試樣本具有代表性，則其結果應呈正態(tài)分布。 ? 測驗分數(shù)背離正態(tài)分布有兩種情況：其一是題目難度普遍較大，被試得分普遍較低，使得低分端出現(xiàn)高峰，呈正偏態(tài)；其二是題目難度普遍較小，被試的得分普遍較高，使得高分端出現(xiàn)高峰，呈負偏態(tài)。 難度的控制 ? 一般說來，影響題目難度的主要因素有： ? 考察知識點的多少； ? 考察能力的復雜程度或層次的高低； ? 考生對題目的熟悉態(tài)度； ? 命題的技巧。 ? 難度控制： ? 正確估計考生水平； ? 弄清弄懂各知識點； ? 掌握命題技巧。 四、區(qū)分度 ? （一）區(qū)分度的含義 ? 指測驗題目對考生實際水平的區(qū)分程度或鑒別能力。 ? 如一道題，學業(yè)水平、實際能力都較高的考生都答對了；而學業(yè)水平、實際能力都較低的考生都答錯了，則可認為該題目有好的區(qū)分度。 ? 區(qū)分度分析主要以效能為依據(jù)，考察考生在每個題目上反應與其在效標上的表現(xiàn)之間的相關程度。 ? 區(qū)分度（ D）的取值范圍介于 — +，值越大，區(qū)分度的效果越佳。 ? 區(qū)分度 D0為正區(qū)分， D0為負區(qū)分， D=0為零區(qū)分 （二）區(qū)分度的計算 ?極端分組法 ?（ 1）客觀性試題 ? D=PHPL ? 例 6：有道試題，高分組有 70%學生通過，低分組有 30%的學生通過；而另一道題，高分組有 40%學生通過，低分組有 70%學生通過，求兩題的各自區(qū)分度？ （ 2）主觀題 ? D=（ XHXL） /N（ HL） ? XH為高分組得分總數(shù) ? XL為低分組得分總數(shù) ? H為該道題的最高分 ? L為該道題的最低分 ? N為應試總人數(shù)的 27%。 例 7 ? 高分組 低分組 ? 得分 X 人次 f 得分 X 人次 f ? 5 4 5 0 ? 4 3 4 1 ? 3 2 3 1 ? 2 1 2 3 ? 1 0 1 4 ? 0 0 0 4 相關法 ? 點二列相關法 ? 例 8： 15個學生在數(shù)學測驗中得分記錄如下，計算數(shù)學測驗中第一題的區(qū)分度？ ? 學生 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 ? 測驗 65 70 31 49 80 50 35 10 81 69 78 55 77 90 42 ? 第一題 0 1 0 1 1 0 1 0 0 1 1 0 1 1 0 二列相關 ? 例 9：已知一測驗中某選擇題的通過率為，答對者的測驗總分平均為 76分，答錯者的測驗總分平均為 63分，全體被試20人總分的標準差為 16，求該題的區(qū)分度？ （三）提高區(qū)分度的方法 ? 使題目的難度適中，使整個考試難度適中 ? 題目的難度適中可使區(qū)分度達到最大值，因此，使難度適中是提高區(qū)分度的重要方法。 ? 著重考察復雜的學習結果 ? 使高能學生得高分或低能學生得低分，使分數(shù)盡量分布在整個分數(shù)量尺上。 ? 掌握區(qū)分度的評價標準。 第十章教育測驗的編制與實施 ? 一、教育測驗編制的一般程序 ? （一）確定測驗目標 ? 什么是測驗目標 ? 測驗目標是測驗編制者所編制的測驗所要達到的某種具體的目的。它明確規(guī)定測驗所要達到的預期結果或標準。 ? 確定測驗目標是編制測驗的首要前提。 測驗目標與教育目標分類 ? 測驗目標的確定是以教育目標分類理論為基礎的。 ? （ 1）布魯姆的認知目標領域 ? 知識：這是最低等級的認知目標。主要指記憶知識。對學過的知識和有關材料的識別和再現(xiàn)。 ? 理解：這是最低層次的理解。主要是對知識的掌握，其特點是脫離了 “ 死記硬背 ” 。 ? 應用：指的是將學過的材料（知識）應用到新的具體情景中去。 ? 分析：指能將知識進行分解，找出組成要素，并分析其相互關系及組成原理。 ? 綜合：與分析相反，指把各個元素或部分組成新的整體。 ? 評價：指根據(jù)一定的標準對事物給予價值判斷。 ? 布氏上述六類目標是有層次、有順序的，知識是最低層次，是最基本的要求。其余依次是理解、應用、分析、綜合、評價。評價為認知領域的最高層次，是前面五種目標的綜合并增加了價值標準。這六類目標，由簡單到復雜，由低級到高級依次排列，組成層次結構。 （ 2）我國認知目標的分類 ? A、五分法 ? 知識 ? 理解 ? 應用 ? 分析綜合 ? 創(chuàng)造 ? B、四分法 ? 識記 ? 理解 ? 簡單運用 ? 綜合運用 （二）確定測驗內容 ? 測驗內容的確定，實際上也就是內容抽樣的決定和測驗目標的確立相結合而成。 ? 這一結合過程必須通過命題雙向細目表來確定。 ? 命題雙向細目表由 3個要素構成： ? 測驗目標 ? 測驗內容 ? 測驗目標和測驗內容的比例 比例確定標準 ? 每一內容范圍的比例應與該內容項目在整個教學領域里的相對重要性相符合，這種相對重要性可由該內容項目的教學課時的多少來體現(xiàn)； ? 每一目標層次所要求的比例應當與測驗編制者認為這個目標對所受測學生的水平所具有的重要性相符。 ? 測驗雙向細目表，是編制測驗的藍圖，它詳細說明了測驗的內容、測驗目標，對試題數(shù)量、考試時間安排、測驗分數(shù)分配等，都起著重要作用，因此，它是編制測驗必不可少的一環(huán)。 測驗材料的收集必須遵循的原則： ? 測驗材料要適合測驗目的 ? 測驗材料要能夠代表該教材的全部內容 ? 測驗材料要有普遍性 ? 測驗材料要適合學生程度并能鑒別學生的學習水平 ? 測驗材料要能激發(fā)學生的進取心 （三）測驗設計 ? 測驗形式的確定 ? 測驗題目形式的確定 ? 測驗具體題型的確定與題目編制 ? 測驗題目量的確定 ? 測驗時間的確定 ? 測驗題目的編制 ? 先按試題的形式及內容分類 ? 從易到難排列 二、測驗題目編制技術 ? 客觀性測驗題目的編制（約占 60%左右） ? 試題應反映教學內容的重點或教學過程中要求學生掌握的有意義的內容和知識點； ? 務必使每道試題自成一體，不可互相牽扯； ? 試題文字力求淺顯易懂，題意明確； ? 試題的答案應該是明確且唯一的； ? 試題應按教育目標的要求，內容不能超過受測者的知識和能力。 主觀性測驗題目的編制（大約占40%左右） ? 試題應考查教育內容中的重要問題； ? 把問題和實際情景結合起來，強調知識的應用； ? 要給被試發(fā)揮自己創(chuàng)造力的余地； ? 要使答案的復雜程度與被試的成熟程度相符。 三、教育測量分數(shù)的整理和分析 ? 編制頻數(shù)分布表 ? 求組中值 ? 求全矩 ? 求組數(shù) ? 求組限 ? 畫頻數(shù)分布曲線圖 分析頻數(shù)曲線圖 ? 常態(tài)分布 ? 即成績中等的多，優(yōu)秀和差的少，俗稱“ 中間大，兩頭小 ” 。學生的學業(yè)成績呈常態(tài)分布，表明能正確、客觀地反映學生真實的知識程度和能力水平。這是因為學生智力及其差異，一般是呈常態(tài)分配的；另外，教學大綱的制定、教材的編寫、考試命題都是從大多數(shù)中等程度學生的實際出發(fā)，為大多數(shù)中等水平的學生經(jīng)過努力能接受的。 正偏態(tài)分布 即低分人數(shù)很多，高分人數(shù)很少。學生的學業(yè)成績呈正偏態(tài)分布，表明測試難度過大，考試要求過高，超越大綱和教材的要求；或者學生的基礎差，應調整試題的難度或教學進度。 負偏態(tài)分布 即高分人數(shù)很多，低分人數(shù)很少。學生的學業(yè)成績呈負偏態(tài)分布，表明測試較易，考試要求低于大綱或教材要求；或學生的基礎好，應加大試題的難度和教學的進度。 ? 駝峰型分布 ? 即低分高分人數(shù)很多，中分人數(shù)很少。學生的學業(yè)成績呈駝峰型分布，表明試題難度過大和過小的題較多，中等難度的太少；或表明學生基礎相差懸殊，好的和差的學生多，中等程度的學生較少。 ? 平波型分布 ? 即中低高分人數(shù)差不多。學生的學業(yè)成績呈平波型分布，表明大中小幾種難度的試題比較接近，或學生的基礎相差不大，試題區(qū)分度低，需要提高區(qū)分度。 陡峭型分布 即中分人數(shù)很多，低高分人數(shù)極少。學生的學業(yè)成績呈陡峭型分布，表明難度中等的試題比例過大，缺乏區(qū)分度或學生的基礎相差不大，要提高試題的區(qū)分度。 ? 學生的成績分布曲線的形態(tài)多種多樣，是教學過程中多種現(xiàn)象的反映，這些現(xiàn)象都是通過原因與結果的連續(xù)和交織形成的。造成這種現(xiàn)象的原因是復雜的，往往與教師的教學態(tài)度、教學水平、教學經(jīng)驗有關，與學生的學習態(tài)度、學習基礎、學習方法、學習習慣有關，與學校的思想政治工作和行政管理工作質量有關，與社會因素和家庭教育有關。 逐題分析法 ? 就是對試卷中每一道題的得分和失分情況進行分析，將每題的高分率（指該題高于應得分數(shù)的 90%的人數(shù)的百分比）、及格率、不及格率和零分率統(tǒng)計出來，以便分析學生對每道試題的掌握情況和存在問題。 第十一章 教育評價的方法 ? 教育評價方法是指收集、整理、優(yōu)化信息資料的手段和技術。它是為達到評價目標，根據(jù)評價的原則選定的有利于各種評價力量協(xié)同工作的一整套活動方式。 ? 一、定性分析方法 ? 是用語言描述形式以及哲學思辨、邏輯分析揭示