寧波市第二輪新課程培訓

1、寧波市第二輪新課程培訓英語測試、命題英語測試、命題和試卷評析和試卷評析慈溪市楊賢江中學 孫建業2009年7月24日 奉化一、英語測試概述一、英語測試概述一、教學和測試的關系一、教學和測試的關系思考：思考：1、教學和測試是怎樣的關系？教學和測試是怎樣的關系？ 2、為什么有的測試不能準確測為什么有的測試不能準確測 出學習者的語言能力？出學習者的語言能力？ 3、測試倒底有沒有必要？、測試倒底有沒有必要？ 4、教師應該如何對待測試？、教師應該如何對待測試？教學和測試之間的關系教學和測試之間的關系n反撥作用反撥作用（backwash）n可能有害可能有害：以考試為目標，為考試而考試以考試為目標，為考試而考

2、試n可能有益：可能有益：推動教學的作用，如寫作、聽力、推動教學的作用，如寫作、聽力、 單詞拼寫單詞拼寫n測試對教學的反撥作用體現：測試對教學的反撥作用體現： 證明和預測、證明和預測、 診斷和調節、診斷和調節、 激勵和促進激勵和促進 英語測試的效度和信度英語測試的效度和信度n效度效度（validity）n什么叫效度？測試考查了需要考查的內容，測什么叫效度？測試考查了需要考查的內容，測試結果能用來評判要測試的語言能力。簡單講，試結果能用來評判要測試的語言能力。簡單講，就是能正確測出想要測的結果就是能正確測出想要測的結果n效度的概念包括效度的概念包括：n內容效度、表面效度、構卷效度、內容效度、表面效

3、度、構卷效度、 標準相關效度標準相關效度測試的效度測試的效度n1、內容效度內容效度（content validity）:n測試內容包括了所要測的語言技能、語測試內容包括了所要測的語言技能、語言結構等方面有代表性的元素（內容言結構等方面有代表性的元素（內容結構）結構）n舉例舉例n2、表面效度表面效度（face validity）:n測試看上去是否能夠測出所要測的能力測試看上去是否能夠測出所要測的能力n舉例舉例測試的效度測試的效度n構卷效度構卷效度（construct validity）n測試能明確體現出要測的能力。這是確測試能明確體現出要測的能力。這是確保試卷有質量的關鍵。保試卷有質量的關鍵。n

4、一般來講，直接測試某種能力，構卷效一般來講，直接測試某種能力，構卷效度都不成問題。但若間接測試，如用選度都不成問題。但若間接測試，如用選擇形式來測量寫作能力，就會產生構卷擇形式來測量寫作能力，就會產生構卷效度問題。效度問題。測試的效度測試的效度n標準相關效度標準相關效度（criterion-related validity）n同期效度同期效度（concurrent validity）:測測試效度與較長時間的實驗結果相對比，試效度與較長時間的實驗結果相對比，看有無一致性看有無一致性n預測效度預測效度（predictive validity）:測測試可以較好地預測被試未來的語言水平試可以較好地預測

5、被試未來的語言水平測試的信度測試的信度n信度信度（reliability）n測試結果比較穩定測試結果比較穩定n舉例舉例舉例數據信度舉例.xlsn信度系數的獲得信度系數的獲得n重試法（重試法（test-retest method）n二分法（二分法（split half method）如何提高測試的信度如何提高測試的信度1、不要給學生太多的答題自由度和游離度不要給學生太多的答題自由度和游離度2、提供明確的題干、提供明確的題干3、提供明確具體的指令、提供明確具體的指令4、確保試卷的印制質量和適當的字體大小、確保試卷的印制質量和適當的字體大小5、確保學生熟悉題型和考綱、確保學生熟悉題型和考綱6、正規又

6、不容易分心的考試環境、正規又不容易分心的考試環境考試信度層面考試信度層面如何提高測試的信度如何提高測試的信度n7、盡可能直接地進行比較、盡可能直接地進行比較n8、提供盡可能詳細而又客觀的評分標準、提供盡可能詳細而又客觀的評分標準和答案和答案n9、評分者培訓、評分者培訓n10、密封評卷，用編號代替姓名、密封評卷，用編號代替姓名評分信度層面評分信度層面效度和信度的關系效度和信度的關系n之間的關系是單方面的之間的關系是單方面的n要有效度，必須要有信度。信度差，效度一定要有效度，必須要有信度。信度差，效度一定差差n但效度差，信度不一定差。但效度差，信度不一定差。n影響信度的因素是多方面的影響信度的因素

7、是多方面的n測試時間、環境設備、評分者的個人差異、題測試時間、環境設備、評分者的個人差異、題目的覆蓋面等。因此測試設計者要考慮到這些目的覆蓋面等。因此測試設計者要考慮到這些因素，力求減少影響。因素，力求減少影響。 測試的類型測試的類型nA、按考試目的：按考試目的：n1、水平測試水平測試（proficiency test）:目的在于目的在于衡量被試是否達到某種語言水平衡量被試是否達到某種語言水平n2、學業成就測試學業成就測試（achievement test）:目目的在于衡量學生是否取得了進步或取得了多大的的在于衡量學生是否取得了進步或取得了多大的進步進步n3、診斷測試診斷測試（diagnost

8、ic test）:目的在于證目的在于證實學習中的不足，為下一步教學做好準備實學習中的不足，為下一步教學做好準備n4、編班測試編班測試（placement test）:目的在于按目的在于按不同水平把學生編入不同班級。不同水平把學生編入不同班級。測試的類型測試的類型nB、按測試方法和方式按測試方法和方式n1、直接測試直接測試（direct testing）:測試能測試能夠直接反映考生某方面的語言能力夠直接反映考生某方面的語言能力n特征特征：效度：效度 ，信度，信度n適用類型適用類型： 測試的類型測試的類型n2、間接測試間接測試（indirect testing）:n不能直接反映所要考查的語言能力，

9、但不能直接反映所要考查的語言能力，但可以給測試實施者提供判斷考生語言能可以給測試實施者提供判斷考生語言能力的信息力的信息n舉例：A. play B. may C. says D. payn特征特征：效度：效度 ，信度，信度n適用類型適用類型： 測試的類型測試的類型nC、按測試的語言點按測試的語言點n1、分散點測試分散點測試（discrete-point testing）每個題目只測試一個語言點知識每個題目只測試一個語言點知識n適用題型：適用題型：n2、綜合測試綜合測試（integrative testing）:是是目前最受重視的測試形式。目前最受重視的測試形式。n適用題型：適用題型：測試的類型

10、nD、按成績判別標準按成績判別標準n1、常模參照性測試常模參照性測試（norm-referenced testing）n某考生成績與參加同一考試的其他考生比較，進行某考生成績與參加同一考試的其他考生比較，進行語言能力的測試。語言能力的測試。n適用于選拔考試，如適用于選拔考試，如n常模參照常模參照：根據招生計劃人數和考試成績，劃定根據招生計劃人數和考試成績，劃定一個分數線一個分數線測試的類型測試的類型n2、標準參照測試標準參照測試（criterion-referenced testing）n以某種特定的語言能力作為判別標準的測試，以某種特定的語言能力作為判別標準的測試，旨在了解實際運用語言能力，

11、但并不與其他考旨在了解實際運用語言能力，但并不與其他考生進行比較。測試時，依據標準看考生是否達生進行比較。測試時，依據標準看考生是否達到某一標準，判定是否合格到某一標準，判定是否合格n適用于水平性考試，如適用于水平性考試，如測試的類型nE、按判卷標準按判卷標準n1、主觀性測試主觀性測試（subjective testing）n特征特征：效度效度 ，信度，信度 ，因此常采用，因此常采用 接測試形式。接測試形式。n適用題型適用題型：n2、客觀性測試客觀性測試（objective testing）n適用題型適用題型：選擇、判斷、配伍、拼寫、填空、選擇、判斷、配伍、拼寫、填空、 簡短問答簡短問答。 教

12、師應該如何對待測試n認識考試的弊端認識考試的弊端n分數不能十分正確、全面說明學生的學業情況分數不能十分正確、全面說明學生的學業情況n分數會導致學生死記硬背、死讀書，壓抑個性、分數會導致學生死記硬背、死讀書，壓抑個性、能力的發展能力的發展n分數能調動學生學習積極性，也會挫傷積極性分數能調動學生學習積極性，也會挫傷積極性n分數在一定程度上扭曲了基礎教育的性質和目分數在一定程度上扭曲了基礎教育的性質和目標標正確對待考試n正確對待考試，促進教與學的良性正確對待考試，促進教與學的良性循環循環n不做分數的奴隸不做分數的奴隸n把考試作為提高的新起點把考試作為提高的新起點n加強對自己能力的培養加強對自己能力的

13、培養n以科學的態度參加考試以科學的態度參加考試二、試題命制二、試題命制n命題的原則命題的原則n科學性原則科學性原則n明確性原則明確性原則n全面性原則全面性原則n整體性原則整體性原則n獨立性原則獨立性原則n合理性原則合理性原則n開放性原則開放性原則n公正性原則公正性原則命題的過程和一般步驟命題的過程和一般步驟n（一）制定考試大綱（一）制定考試大綱n考試大綱包括：目的、性質、采用何種類型的考試形式、方法、考試對象、題型種類、考試時間、評分制、考試內容、范圍及其水平（難易度）和樣題。n大綱是命題的根本依據，也是考生復習準備的依據，必須預先公布。命題的過程和一般步驟命題的過程和一般步驟n（二）制定編題

14、計劃（二）制定編題計劃n主要任務：確定各種內容試題的比例、所需時間n編制前，需要掌握的情況：編制前，需要掌握的情況：n了解學生學習的基礎狀況，為難易度作準備n分析學生對當前知識的掌握和能力的發展情況，以便及時補救n在一個教學階段結束時能為總結性評價提供信息n確定合理的題量、設計好難易度和區分度要求。命題的過程和一般步驟命題的過程和一般步驟n確定雙向細目表確定雙向細目表考查內容考查內容學期/單元 記憶_%理解_%應用_%知識點1知識點2命題的過程和一般步驟命題的過程和一般步驟n布魯姆認知目標分類布魯姆認知目標分類水平層級內容記憶識別回憶理解解釋、舉例、分類、總結、推斷、比較、說明應用執行、實施分

15、析區分、組織、歸屬評價核查、判斷創造生成、貫徹、計劃命題的過程和一般步驟n修改后的雙向細目表命題目的與試卷的總體難度內容考查目標其他考量學期記憶_%理解_%應用_%分析_%評價_%創造_%難度題型題量時間評分知識點1知識點2測試時間：_分鐘命題的過程和一般步驟命題的過程和一般步驟n（四）草擬試題n（五）篩選修訂n（六）組卷n（七）參考答案和評分細則n（八）預測預測預測n檢查試題是否符合考試大綱和雙向細目表要求n檢查試題題面是否蘊含著提示，或試題內部存在暗示、內容交迭等n題干和題肢分析。n計算每一題的難度、區分度。n信度分析n分析試卷對知識和能力的考查以及所占比例n檢查評分標準是否客觀可靠測試技

16、巧選擇題測試技巧選擇題n可能的弊端可能的弊端n只測試可見知識n做題時猜測n好的題干和題肢的設置n作弊傾向測試技巧綜合測試n設置的形式設置的形式n完形填空nC-測試n聽寫n寫作測試中最重要的問題寫作測試中最重要的問題n寫作任務的可行性n自由度限度寫作評分寫作評分n1、整體評分法n2、分析評分法n建議的評分原則建議的評分原則n用整體評分法n作文要有滿分n作文要有高分n作文要有差距n作文要有讀者三、試卷的質量分析和講評三、試卷的質量分析和講評n科學性分析科學性分析：對內容、語言表述正確性、插圖的規范性、問題要求對學生的合理性和公平性的分析n一致性分析一致性分析：對考試要求與內容、考試成績與平時學業水

17、平、教師對學生評價的分析n有效性分析：有效性分析：對不同層次學生的學業水平、對促進教學是否有效的分析n技術性分析技術性分析：難度、區分度分析試卷的技術性分析n1、難度分析：難度分析：n客觀題難度：PR/n nR為選對的人數，n為總人數n主觀題難度：P某題平均分/滿分n難度指數在質量分析中意義明顯。一般認為難度指數在0.5-0.7之間是比較適宜的。試卷的技術性分析n區分度分析區分度分析nD（優組答對某題人數差組答對人數）/優組（差組）總人數n方法：1、被試按總分高低排隊n 2、從最高分和最低分各取27的人組成優組和差組n 3、分別計算優組和差組答對某題的人數n 4、按公式計算區分度標準nD=0.19區分度很低或毫無區分度n0.20=D=0.29 該題目尚可，但應修改n0.30=D=0.40 該題目區分度最好n難度和區分度關系：難度和區分度關系：n試題太難或太易，區分度低，中等難度的試題區分度最強試卷講評n診斷性講評：針對共性的典型錯誤進行講評n發散性講評：針對靈活性較大的典型試題作進一步的“借題發揮”講評n探索性講評：針對常規題目的變題n延伸性講評：針對題目進行