1、自學考試試卷質量評估與反饋方式方法探討摘要：現針對自學考試試卷質量評價和反饋的現實情況，依據科學、可操作和合理的原則，結合具體的工作需求，探討試卷質量評估和反饋方式方法，并應用于實踐以指導命題，適合于自學考試的統計分析方法是多年來探討的重點，自學考試的特殊性決定了選擇理論方法的特殊性，因為自學考試的課程門類眾多，課程內容和試題的命制特點不盡相同，所以試卷評估方式方法也不必完全一致試卷質量評估一般包括測量和評價兩個方面。基于自學考試標準參照性、水平性考試的性質與特點，區分度僅在劃界分數點上具有重要意義，因此自考試卷的測量指標是難度、信度、效度（結構效度、因素分析、效標關聯）、測驗信息量、項目性能

2、等，區分度為參考指標。評價則主要包括覆蓋面、能力層次、難易度、試題質量等幾方面的推斷性評價以及對試卷的總體評價。因為這些項目互相依存、互相補充、互相制約，依據“完整協調”和“優勢互補”的原則，對自考試卷評估時要篩選和組合項目。現針對自學考試試卷質量評價和反饋的現實情況，依據科學、可操作和合理的原則，結合具體的工作需求，探討試卷質量評估和反饋方式方法，并應用于實踐以指導命題。一、定量分析定量分析是多年來自學考試試卷質量評估方面的難點。因為樣本采集的難度、統計分析方法的局限以及需求不明顯等原因，定量分析一般只是限于研究和探討層次，沒有更廣泛地展開。適合于自學考試的統計分析方法是多年來探討的重點，自

3、學考試的特殊性決定了選擇理論方法的特殊性。選擇哪種分析方法不僅要參照教育統計與測量專家的建議，更需要工作人員結合工作需要。既要科學、合理，又必須具備可解釋和可操作性。下面結合高等數學（專）的統計結果來探討統計分析方法的差異：1.難度3.項目性能和測驗信息量定性分析缺乏項目性能和測驗信息量分析，經典測量理論不能揭示測驗所含有的各個項目的性能與質量，也不能揭示整個測驗的性能和質量的關系，所以采用Logistic的單參數和雙參數模型進行評價。以上統計分析可見，定性分析和定量分析的結論后差異比較大（定性分析表僅由閱卷組長填寫），定量分析采取不同的方法、選擇不同的分析項目也有不同的評價意見。項目反映理論

4、的Logistic單參數模型是以難度為參數的模型，雙參數模型是以難度、區分度為參數，單參數和雙參數模型是獨立于被試特質水平的，其測驗總分都是充分的統計量，這是兩者的優點。單參數模型更加突出（但當實測資料跟模型擬合良度不好時，優點突出不出來）。因為區分度不是自學考試測量的必要信息量，將區分度作為重要的信息量參數，不是十分適宜，相比較之下Logistic的單參數模型更具優勢，更契合自學考試的性質特點。因此，可以采取項目反映理論的單參數模型作為自學考試試卷定量分析方法，其次參考經典理論的分析結果（經典理論的結果比較直觀和形象），也可以從雙參數模型中把握較為細微處的差別，從而得到比較全面、比較客觀的定

5、量分析結果。二、定性分析教育理論認為，定性分析就是從性質上進行探討。對于試卷的定性分析，多是對試卷的總體評述和對試題性質等方面的評價。填寫定性分析評估表是目前采用的較為普遍的定性分析方法。因為定性評估表的填表人的主觀因素所起的作用非常大，同一份試卷由不同的人評價，結論差異很大，所以定性分析必須是多方參評。主命題教師（或審題教師）、閱卷組長、助學老師以及考生四方面的意見集合的定性分析才能定為本試卷的定性結論，缺乏任何一個方面，定性分析都缺乏科學性。比較適合的操作方式是：試卷命制結束，由主命題教師（或審題教師）預估試題和試卷的各項指標，填寫定性評估表。考試結束后將同樣的定性評估表隨試卷發放給閱卷組

6、長，閱卷組長在閱卷結束后將定性評估表填好上交。在此期間組織助學教師和考生對試卷進行評價。意見收集后由命題管理人員總結分析形成該課程的定性評估報告。目前使用的定性分析表過于拘泥于某些指標的量化往往影響了教師對試卷客觀公正的評價，諸如難易度指標的評定，參與評估的老師主觀性因素非常大，即使結合閱卷情況，尺度也有失公允。與其收集參考意義不大的數據，倒不如放棄指標數據的主觀評估，把重點轉移到對試卷的非量化的因素的評價上，即用描述性語言對試卷的質量進行評價，增加可操作性。三、反饋教育統計分析和評價的結果必須反饋到考試的實踐中才能起到作用。在反饋前必須進行全面分析。單純的定性分析和定量分析都缺乏解釋的合理性

7、，只有將二者結合起來才是相對科學的評估。從質量評估指標體系可以看出，測量和評價各有所長，應突出二者的特點，避免相同指標的重復，適當的交叉可以保留作為分析效度的參考，如定量分析是用數據來說話的，在定性分析中不必保留諸如難度的比例和數據，但可以有描述性的推斷。而對能力層次、覆蓋面等方面的評價在定量分析中又無法實現，所以一份成功的課程試卷分析報告必須綜合定性分析和定量分析，才能得出較為全面和科學的結論。同時也匯總一些其他信息，諸如全國其他省市的定性分析情況、考試時掌握的考場反饋情況、閱卷結束后獲取的本市全部考生的及格率、各分數段統計等信息。命題管理人員根據分析的情況和掌握的信息形成書面的課程試卷分析報告，然后反饋到命題教師，組織命題教師認真研究、分析，利用各種信息和相關考試數據，重新評價試題的各種指標，并在此基礎上對題庫（卷庫）里試題的各項指標進行調整和修改，使之更加科學準確，以改進完善命題工作。自考試卷評估與反饋模式基本構架如下：因為自學考試的課程門類眾多，課程內容和試題的命制特點不盡相同，所以試卷評估方式方法也不必完全一致。諸如主觀題占絕大比重、題量較少的試卷，可能更適合采用定性分析的方法，客觀題占絕大比重、題量較大的試卷，可能更適合采用定量分析的方法，而一般課程