컴퓨터화 능력적응검사

컴퓨터화 능력적응검사 1. 의의컴퓨터를 이용한 모든 검사를 컴퓨터화 검사(computerized test)라 부른다. 컴퓨터화 검사의 유형에는 컴퓨터 이용검사(computer based test, CBT)와 컴퓨터화 능력적응검사(computerized adaptive test, CAT).가 있다 전자는 전통적인 지필검사와 동일한 내용의 검사를 컴퓨터를 실시하는 것을 말하고, 후자는 모든 피험자에게 동일한 검사를 실시하는 것이 아니라, 개별피험자의 능력에 맞는 문항을 제시하여 그 문항의 정답을 맞히면 더 어려운 문항이 제시되고, 만약에 틀리면 더 쉬운 문항을 제시하여 피험자의 응답결과에 적응하는 방식으로 실시하는 검사이다.  2. 특성CAT는 사전에 구축된 문제은행에서 컴퓨터의 연산능력을 이용하여 피험자가 정답을 맞히는 가의 여부에 따라 능력수준에 부합하는 난이도를 가진 문항을 선택하여 제시하는 과정을 반복함으로써 피험자의 능력을 추정하는 것으로 다음과 같은 장점과 유의점을 가진다. (1) 장점첫째, 누구에게나 공정하고 정확한 검사결과를 확인할 수 있다. CAT를 시행하면 피험자의 높은 정보만을 주는 문항만을 컴퓨터가 선별적으로 제시하게 되어 모든 피험자의 능력을 같은 정도로 정확하게 평가할 수 있다.둘째, 피험자의 능력에 맞는 문항을 제시하게 되어 피험자의 동기를 유발하고, 검사상황에서 나타나는 측정의 오차를 감소시킬 수 있다. 이는 모두에게 동일한 문제가 제시되는 전통적 방법과는 달리 능력이 높은 피험자와 낮은 피험자에게 다른 문제가 제시되기 때문에 나타나는 결과이다.셋째, 피험자의 능력수준에 부합하는 검사를 실시하기 때문에 개별적인 측면에서 보다 적은 수의 문항으로 효율적인 검사를 실시할 수 있다. 즉 검사시간과 비용이 절감된다.넷째, 개인의 능력에 따라 다른 문항의 검사가 선택되어 시행되기 때문에 검사과정에서 피험자 간에 발생하는 부정행위를 방지할 수 있다. (2) 유의점첫째, CAT와 지필검사를 병행하여 실시하는 경우에 두 검사 점수의 상호 교환 가능성의 충족 여부를 증명하여야 한다. 특히 검사 시기에 따라 검사결과가 달라질 수 있으므로 검사결과를 개인자료로 활용하는 경우에 두 검사에 의해 추정된 능력의 동등성 여부가 확인되어야 한다.둘째, CAT에서는 피험자가 문항의 답을 모른다고 다음 문항으로 건너뛸 수 없는 제한점이 있다. 이는 피험자에게 검사에서 불안을 유도할 수 있기 때문에 CAT 검사 실시 이전에 피험자에게 검사 실시 방법에 대한 자세한 안내와 설명이 필요하다.  3. 구성요소CAT는 문제은행, 문항반응모형, 검사알고리즘 등의 3가지 요소로 구성된다.첫째, 문제은행이란 검사를 위해 다른 다수의 문항을 개발하여 분류, 저장, 관리, 활용하는 문항의 집합 체제를 말한다. 이 문제은행은 문항의 특성과 관련한 다양한 정보를 함유하고 있다. CAT는 피험자의 능력수준을 고려해야 하므로 전통적인 지필검사보다 더 많은 양질의 문항을 가진 문제은행을 필요로 한다. 둘째, 문항반응모형은 총점에 의하여 문항을 분석하고 피험자의 능력을 추정하는 것이 아니라 문항 하나하나에 근거하여 분석하는 이론이다. 문항반응모형은 각 문항마다 고유한 문항특성곡선에 의하여 문항을 분석한다. 문항특성곡선은 피험자의 능력과 문항의 답을 맞힐 확률과의 함수관계로 피험자의 능력에 따라 문항의 답을 맞힐 확률을 나타낸다. 문항반응모형은 고전검사이론이 입증하지 못하는 문항 특성 불변성의 개념과 피험자 능력 불변성의 개념을 유지한다.고전검사이론에서는 어떤 문항에 응답한 피험자 집단의 능력이 높으면 쉬운 문항으로 분석되고, 피험자 집단의 능력이 낮으면 어려운 문항으로 분석되므로 문항 특성의 불변성을 유지하지 못한다. 또한 피험자의 능력추정은 검사의 난이도에 따라 피험자의 능력 추정이 변화되는 문제점이 있다. 즉 검사가 쉽게 제작되면 피험자의 능력은 과대추정 되고, 검사가 어렵게 제작되면 피험자의 능력은 과소추정 된다. 즉 피험자 능력 불변성의 개념을 유지하지 못한다. 그러나 문항반응모형은 이런 불변성의 개념을 유지는 특징이 있다.셋째, 검사 알고리즘이 구축되어야 한다. 이는 피험자의 검사를 위해서 진행과정에 대한 규칙이 명확히 설정된 것을 말한다. CAT에서는 피험자의 사전정보에 의해 임시적으로 추정된 능력 수준에 해당하는 난이도를 가진 문항을 가지고 검사를 시작하며, 맞히면 어려운 문항이 제시되고 틀리면 쉬운 문항이 제시되어 제시된 문항의 정답 여부에 따라 새로운 능력이 추정되고, 다시 이 능력에 적합한 문항을 선정하는 방식으로 검사가 진행된다(성태제 외, 2025). 출처성태제외 3인(2025), 교육평가의 기초, 학지사.