【正文】 的靈活性，評估也需要更多的評估人。對于簡單類型的評估，如多項選擇題，評估過程幾乎可以完全自動化，不需要評估人的參與。對于更為復(fù)雜的評價，如設(shè)計評價，而不像實施評價那么簡單，測試者有多種可選方案，評估不是簡單依據(jù)對或錯進(jìn)行，而應(yīng)根據(jù)正確性進(jìn)行。計算機(jī)軟件已成為考官一種輔助用來過濾信息，能夠幫助考官解決部分問題但是問題的最終解決對于考官而言仍然是一個難題。對于自動評估和考官之間的最佳成本效益的平衡，隨時間變化而變化，對于被評估的考生而言而有所不同。 目前大多數(shù)電腦評審評估只有結(jié)果而看不到方法過程，因為這易 于自動化。目前正在開發(fā)的技術(shù)允許用生成答案的方法收集和評估?？脊僭谠u估中獲得額外的靈活性，因為它即可以對學(xué)習(xí)者的結(jié)果進(jìn)行評估，也可以對專業(yè)人員的方法以及結(jié)果進(jìn)行評估。例如，當(dāng)對 IT技能的大學(xué)生進(jìn)行評估時，可以從文字處理的能力進(jìn)行對他的評估，當(dāng)評估一個專業(yè)的打字員時，可以根據(jù)他的編輯文章的效率以及正確性來評估。 本文介紹了在以計算機(jī)為基礎(chǔ)的技術(shù)評估中，如何應(yīng)用技術(shù)來增加靈活性， 以及評估的潛在用途。 關(guān)鍵詞 電腦化的評估 技能 評估技巧 電腦評估中有三個利益相關(guān)者，系統(tǒng)開發(fā)人員，考官和考生。每個 利益相關(guān)者都有他們自己評價體系中的要求，而他們的要求可能也會發(fā)生沖突。對于開發(fā)人員，最重要的戰(zhàn)略是要建立一個系統(tǒng)，使系統(tǒng)盡可能靈活地被用戶用于特定用途。這種系統(tǒng)將適用于一個廣闊的市場，一般的產(chǎn)品比專業(yè)的產(chǎn)品具有更大的銷售范圍。但是，一般用途的產(chǎn)品不像專門針對某一特定的產(chǎn)品好，因此，開發(fā)者具有艱巨的任務(wù)，即平衡開發(fā)的靈活性和開發(fā)成本，來提高產(chǎn)品的適用范圍。 電腦化評估正在迅速變化著，其中部分是由于技術(shù)的進(jìn)步，部分由于算法的改善，以及市場評審使用的增加。目前可用的評審人員都是初級的，在未來數(shù)年里，系統(tǒng)會有較快發(fā) 展會更加靈活和復(fù)雜。因此開發(fā)人員必須能預(yù)測未來的發(fā)展可能性，并把必要的靈活性應(yīng)用到當(dāng)前產(chǎn)品中，使新的開發(fā)更加容易和便宜。 現(xiàn)今有兩種不同類型的靈活性，開發(fā)人員開發(fā)時要考慮計算機(jī)化評估 。靈活的交貨方式和靈活運用。靈活的交付意味著評估軟件應(yīng)該能夠進(jìn)行調(diào)整以適應(yīng)特定的環(huán)境，例如，對于運行時硬件的選擇或提供的測試選擇。這也意味著，其測試的結(jié)果和演習(xí)可以集成到用戶當(dāng)前的標(biāo)記處理和記錄系統(tǒng)。靈活性的運用意味著該軟件可以應(yīng)用到不同類型的考試或測試中，例如，形成性測試和總結(jié)性測試。靈活性增加了對評估系統(tǒng)功能的要求，如系統(tǒng)的 大小，在一定程度上由評估定制的開發(fā)時間和開發(fā)成本，評估系統(tǒng)要符合大量用戶的具體要求。 本文著重從開發(fā)者的角度介紹了以計算機(jī)為基礎(chǔ)的信息技術(shù)技能的評估，并根據(jù)評估的發(fā)展和筆者的經(jīng)歷闡明了其靈活性。 有許多不同的學(xué)習(xí)模型，這些模型是多年發(fā)展而來的。其中一些模型在 Domjan（ 1998年）有討論。在基爾斯利（ 1998年）中也可以找到一些眾所周知的模型的總結(jié)。許多作者在書中引用的計算機(jī)評估模型都是 Bloom的分類法， Bloom（ 1956）。他和他的同事定義學(xué)習(xí)和評估的分層模型，他們認(rèn)為在 分層模型中模型越高所涉及的技能就越高。 級別 記憶和回憶以前記憶信息的能力，例如，要知道事實，方法，原則，概念和程序。 級別 把握材料的含義的能力，例如，總結(jié)材料或通過預(yù)測未來趨勢。這個水平包括筆譯，口譯和估算等過程。 級別 運用知識的能力和在新形勢的情況下使用規(guī)則，方法和原則的能力。 級別 能夠把材料分解成幾個組成部分，并了解每個部分之間的關(guān)系的能力。 級別 能夠創(chuàng)建的組件設(shè)置一個新的對象的能力 ,這要求具有規(guī)劃以及分析能力。 級別 根據(jù)具體的標(biāo)準(zhǔn)值判斷材料價值的能力。 根據(jù) Bloom的級別，測試中提供給考生評估的體系中，越是高的學(xué)習(xí)和評估，越需要更大的靈活性。因此，電腦化評審的評估結(jié)構(gòu)高，級別復(fù)雜，生產(chǎn)成本昂貴。在較低的水平上進(jìn)行評估時，傳回的是正確或不正確，對于他們來講是些沒有什么有意義的反饋信息。例如，用一個選擇題來測試考生是否知道法國的首都哪個。選巴黎的這個答案是明顯正確的，其余的都是不正確的。對于一個不正確的答案，唯一的反饋就是給予正確的回答，可能的話，顯示為什么答案是錯誤的。在較高水平評估中，評估是按正確性度分級的，并有相當(dāng) 數(shù)量的有意義的資料反饋給考生。評估者會根據(jù)答案接近正確答案的程度以及所使用的方法來進(jìn)行評估。反饋的信息包括不正確的答案和解釋性的意見。而在較低的水平，精確匹配算法經(jīng)常被使用在高水平下，近似匹配的算法更復(fù)雜和緩慢。它是利用這些近似匹配算法，把高層次的技術(shù)水平的評估從低技能的評估區(qū)分開來。 被評估的數(shù)據(jù)能區(qū)分高度評估和低技能的不同點。低水平的應(yīng)用幾乎總是評估工作的結(jié)果，例如，被輸入到電子表格的公式是作為一個電子表格的工作的一部分。一級技能可以根據(jù)工作的結(jié)果進(jìn)行評估，但也可以根據(jù)考生得出結(jié)果的方法進(jìn)行評估。例如， 密鑰序列和鼠標(biāo)的使用。這個方法在團(tuán)體工作技能的測試中尤為重要。 一個典型的 IT 技能評估，就像許多其他形式的評估一樣，練習(xí) /考試都遵循以下順序步驟。 。 。 ，檢查考生答案的錯誤之處。 ，對錯誤答案進(jìn)行分類。 。 / 歷年成績 /才能記錄在評估系統(tǒng)中 模型中的靈活性依賴于： 。 。 誤的方法。 。 所有這些根據(jù)下面更詳細(xì)部分進(jìn)行考核在評估過程中，遇到的困難取決于以下幾點 。 。 。 。 在實用技能的評審中，可以通過許多方式來增加評審的多樣性。通過本節(jié)加以闡述， 并列舉了資訊科技技能評估應(yīng)用的靈活性。 問題的設(shè)置 一般來說，很多考官希望 根據(jù)自己的 能力 出考題 ，而不是從所提供的練習(xí)集 中選取試題 。 對于自動化評估的生產(chǎn)商來說，給考官提供選 題工具是有一定的困難。這是因為技能的評估難度在很大程度上依賴于大量的個人之間誤差的相互作用和錯誤之間的相互作用，但是可以通過精心練習(xí)降低到一定程度。 如果 測試員 或 教師根據(jù) 自己 靈活地考題，那么 他們可能會增加評估困難 ， 減少電腦評估的準(zhǔn)確性。 但是 自動 提醒考官不正確的命題的做法 可以減少這種可能性。 案例 WordTask模塊，辛等人。 （ 1996） WordTask文字 處理評估包含評估方案套件的一部分 導(dǎo)師 的模塊。 這個模塊允許教師或考官自定義他 /她的需求評估。 該評估 所提供的其中一項功能 就是 允許添加新的導(dǎo)師練習(xí)集以及給學(xué)生 反饋報告的數(shù)量和類型。此模塊不包括行使審閱檢查，以提醒導(dǎo)師的早期評估的問題， 但是一些 專業(yè)考試 中有這些模塊 。 IT 技能的鍛煉可以通過評估來評估他的結(jié)果，這就是產(chǎn)生的最后文件，或用于生成評估結(jié)果的方法。如果對最終的文件進(jìn)行了評估，那么考官就可以使用任何他 /她希望的方法，來生成正確的結(jié)果。如果采用的方法被評估，則是考官所出的試題靈活性小。許多技能都是通過結(jié)果進(jìn)行評估的，因此，考官可以使用任何方法，達(dá)到他 /她希望以生成所需的結(jié)果。 大多數(shù)的 IT 工具提供許多同等功能的用戶來執(zhí)行相同的動作，例如， 可以通過使用命令、制表符、空格等文字處理器將標(biāo)題放置成不同方式。在某些情況下，測試評估的輸出形式是紙質(zhì)的，因此任何真確的輸出形式組合都是可以接受的。在其他情況下，特別是有幾個人合作的時候，一起制作文件從而以何種方式產(chǎn)生的效果才是重要的。例如，更改文件中的所有標(biāo)題，使其具有不同屬性和不同的字體風(fēng)格，這樣是簡單，但是如果他們已經(jīng)使用了，但是從來沒有這樣做過，那就困難了。在這種情況下，其實就是對已經(jīng)產(chǎn)生效果的方法進(jìn)行評估。這包括收集和評估由于受用戶調(diào)用產(chǎn)生的影響的行動順序流事件。收集事件流是比較困難，因為要收集有 關(guān)檢測結(jié)果，但它允許通過靈活性和計算機(jī)技術(shù)輔助評估進(jìn)行額外的分析，以達(dá)到可能的評估標(biāo)準(zhǔn)要求。因此，收集和分析事件流提供了更大的靈活性，但是這不是很普遍，所以需要一個更大的發(fā)展以及努力。 案 例 – 基于事件流分析的電子表格 電子表格評估產(chǎn)生于收集事件流的電子表格工作中。通過 事件流的分析來確定考生的行動順序。目前這些信息流僅用于幫助人們消除歧義的錯誤，但是最終輸出的事件流可以用來分析這種評估方法。電子表格評估是比較復(fù)雜的，但是與等效成果的評估相比，它需要較高的開發(fā)成本。