摘要:與傳統的紙筆測驗相比,認知診斷計算機化自適應測驗具有精確、高效、安全、人性化的特點和優勢,是現代測量理論與技術的一個重要應用。本章介紹了認知診斷計算機化自適應測驗的一般建構過程和應用過程,主要包括題庫建設、選題策略等,同時還介紹了結合認知診斷計算機化自適應測驗的題目在線更新技術。

計算機化自適應測驗(computerized adaptive testing,CAT)是基於現代測量理論的一個最具特色和優勢的應用,其優勢主要體現在三個方麵:一是能夠根據被試不同水平提供適合其難度的題目,這也是計算機化自適應測驗的最大優勢。這種測驗形式改變了傳統的所有被試測試相同題目的模式。隻有適合被試水平難度的題目才能對其評價提供更大的信息量,太難的題目無法定位被試水平的上限,太容易的題目無法定位被試水平的下限,隻有難度合適的題目才能估計被試的水平範圍。二是測驗過程中出題、能力水平估計和測驗終止均是基於網絡的計算機化自動處理,節省了測驗組卷、試卷分發和回收、試卷批改和成績發布等環節消耗的大量人力、物力和財力,大大提高了測驗效率。三是測驗的組織過程更加安全。計算機化自適應測驗實施過程中,不同被試的測驗題目是不一樣的,被試無法通過抄襲或外部提供的信息來進行作弊,而且測試過程通過網絡進行,試卷和題目存儲在一個統一的地方,這樣可以保證測驗的實施過程更加安全。

當然,要充分發揮計算機化自適應測驗的優勢,有兩個方麵的工作必須做好,一是題庫的建立,題庫必須覆蓋測量目標的所有方麵,題目的難度、區分度指標分布要合理,平行題要足夠多。二是題目的在線更新,這包括兩個方麵的內容:一是題目參數在每隔一段時間後需要根據采集的測試數據進行更新;二是題目內容需要更新,這也包括增加新題,增加的新題可以通過在線更新的方法來標定其參數,不需要專門單獨組題進行測試。

計算機化自適應測驗模式在認知診斷評價中同樣具有重要的應用價值。認知診斷計算機化自適應測驗(cognitive diagnostic computerized adaptive testing,CD-CAT)與基於項目反應理論的計算機化自適應測驗雖然基本理念是一樣的,但CD-CAT的具體實施過程卻與IRT-CAT有著很明顯的不同。

計算機化自適應測驗一般包括以下幾個方麵的內容:題庫建設、選題策略等。所有這些內容都需要在正式實施測驗之前設計完成。在計算機化自適應測驗係統中,有時候還會嵌入題目在線更新模塊,包括新增題目、題目內容更新、參數更新與參數標定。認知診斷計算機化自適應測驗同樣包括這幾個方麵的內容。