控制試卷間試題重覆度的選擇策略

Abstract

近年來，英語文能力檢定系統普遍運用電腦化測驗(computer-based test；CBT)結合項目反應理論(item response theory; IRT)為發展測驗系統的理論基礎。但大都數的測驗系統在選題策略上使用隨機選題，以難易度為限制條件，以至於設計出的試卷和施測目的無法完全相符，近來國內外許多學者應用各演算法結合測驗訊息量(test information function)設計出選題策略，應用不同的選題策略可編製一份和目標訊息量誤差更小的試卷，使試卷更能符合施測目的之試卷。 全民網路英檢為電腦網路測驗，系統會依報名人數產生多份試卷，必需考量每一試卷如何組成，例如試卷內的試題呈現型式，每一試卷內的試題類別，以及難易度等的變項應都在一定控制範圍內，故本研究在建構挑題及試卷產生系統，讓命題委員除了以難易度挑題外，更能以試題領域或英語文能力指標配合多樣式的試題呈現方式為限制條件的挑題系統，使系統產生的每份試卷的試題呈現型式在一定控制範圍內。 考量電腦測驗，如何在有限的試題庫控制試卷間試題的重複度，防止再次測驗時試題和上次測驗重複度過高？本研究嘗試利用貪婪演算法，研究在有限的題庫試題，使系統產生最多的試卷數，其所有試卷間的試題重複度在適當比例之內。 本研究結果可應用於類似全民網路英檢的挑題及試卷產生系統，使系統產生的試卷其測驗能具公正性，提高其實用性，並使全民網路英檢同時注重評量與學習進而成為國內具公信力的英語能力檢定系統。