교육공학

소개글

교육공학에 대한 보고서 자료입니다.

본문내용

제와 쉬운 문제에 답한 정보는 유용성이 떨어진다. 다시 말해, 자기 수준에 적합하지 않는 문제를 치르는 것은 그 학생의 능력을 평가하는데 별로 도움을 주지 못한다. 이러한 제한점을 극복하기 위해서 오래 전부터 학생의 수준에 따라 치르는 검사의 난이도가 달라지는 적응성 검사가 시도되었다.
1) CAT
CAT는 앞에서 제시된 CT의 장점에 더하여 다음의 장점을 가진다.
⑴ 측정의 정확성
문제의 어렵고 쉬운 정도인 난이도, 능력이 높은 학생이 정답할 수 있고 능력이 낮은 학생이 정답하지 못하는 정도인 변별도, 능력이 하나도 없는 학생이 단순한 추측(일정의 찍기)으로 정답을 할 수 있는 정도인 추측도를 종합적으로 고려하여 개별 학생의 능력수준에 맞는 문제들로 구성된 시험을 치르게 함으로서, 결국 학생의 능력을 보다 정확히 측정 가능하다.
⑵ 측정의 효율성
CAT의 경우에는 개별 학생이 자기의 능력에 부합되는 문제만으로 구성되는 문제를 치르게 됨으로서 전통적인 검사에 비해서 효율적으로 학생의 능력을 측정할 수 있다.
⑶ 수시평가
CAT는 각 개별학생이 치르는 검사가 동일하지 않기 때문에 동일한 시간에 검사를 치를 필요가 없다. 특정한 날 아침에 치러도 되고, 다음 날 오후에 치를 수도 있다. 즉, 전산 및 검사 환경이 구비된다면 수시로 검사를 치르는 것이 가능하다.
⑷ 동일한 오차 수준으로 측정이 가능
전통검사이론에서는 모든 수험자의 오차(진점사와 관찰점수의 차이)가 동일하다고 가정한다. 예를 들면, 0점을 맞은 학생의 오차, 80점을 맞은 학생의 오차, 100점을 맞은 학생의 오차가 동일하다는 것이다. 그러나 이는 충족되지 못하는 가정인데, 일반적으로 0점 100점을 맞은 학생이 복수의 동형검사에서 일관성 있는 점수를 받을 확률은 평균 정도를 맞은 학생이 일관성 있는 점수를 받을 확률보다 높아진다. 그러나 CAT에서는 문항반응이론(IRT Item Response Theory)을 사용하여 이 문제를 해결하였다. 각 학생의 능력수준을 추정하면서 오차를 함께 추정할 수 있는데, 학생이 치르는 문제의 수가 늘어날수록 오차 값이 줄어들게 된다. 따라서 오차 값을 특정수준(예, 0.03)으로 정해 놓고 CAT의 검사종료기준으로 학생의 오차 추정 값이 0.03이 되면 검사가 끝나는 방법을 이용한다면 이론적으로 모든 학생이 동일한 오차 추정 값을 가지게 되고, 결국 모든 학생을 동일한 수준으로 측정하는 것이 가능하다. 그런데 이러한 장점이 현실화되기 위해서는 문제은행 내에 능력수준별로 적합한 문제의 수가 충분해야 한다.
⑸ 검사의 목적이나 필요에 따라 적절한 검사 전략 채택이 용이함
검사의 목적에 따라 검사의 출발점, 문제선정기준, 검사 종료기준을 융통성 있게 조정하는 것이 가능하다.
2) CT 및 CAT의 제한점
⑴ 초기에 많은 비용이 필요
컴퓨터를 검사에 사용하기 위해서는 컴퓨터 본체, 모니터 등 기계장비를 구입해야 한다.
⑵ 공학적 기준이 설립되어 있지 않음
컴퓨터를 이용한 검사 및 컴퓨터이용개별적응검사 시행 시에 어떠한 형태로 화면에 문제를 보여주어야 하는지, 문제를 통과시키고, 반복해서 문제를 검토하고, 답을 수정하기 위해 어떠한 인터페이스를 사용하는지 등에 관한 표준화된 기준이 마련되지 않았다.
⑶ 화면에 제시하는 것이 제한됨
이전에 지필검사에서 제시할 수 없었던 멀티미디어 자료를 사용한 검사가 가능해졌지만, 컴퓨터 화면에 제시되는 활자나 도형 등은 종이 시험지에 비해 크기나 선명도가 떨어지는 제한점을 가진다.
⑷ 새로운 오차 발생 가능성
앞에서는 표준화를 통하여 오차가 줄어든다고 주장했지만, 컴퓨터는 새로운 오차를 소개할 가능성이 있다. 그중 대표적으로 컴퓨터 경험과 불안감을 들 수 있는데, 실제로 검사가 재고자 하는 능력이외에 컴퓨터를 사용해본 경험이 검사의 점수에 영향을 끼칠 수 있다.
3) CAT의 제한점
⑴ 맥락효과
실제로 동일하지 않은 문제를 동일하지 않은 순서로 치르게 된다. CAT를 치를 때 경우에 따라서는 수험자가 특정 영역에 국한된 문제만을 치르게 되고 그 결과에 따라 점수를 받을 수 있다. 예를 들어, 도형, 통계, 함수영역의 수학 능력을 측정하고자 하는 검사에서 한 학생이 도형영역의 문제만을 치르고 높은 점수를 받았다면, 이 학생이 통계와 함수영역도 잘 한다고 말할 수 있는 것인가?
⑵ 문제 자체 오류의 심각성
시험의 문제 자체가 오류를 가지고 있는 경우가 있다. 대표적인 예로는 지문 혹은 선택지에 오타를 포함하고 있거나, 정답이 없거나, 복수의 정답, 혹은 오답과 정답이 바뀌어지거나 하는 경우를 들 수 있다. 또한 한 문제의 지문 혹은 선택지가 다른 문제를 푸는데 필요한 정보를 주는 경우도 있다.
⑶ 문제의 재검토 및 응답내용의 수정 불가능
전에 풀었던 문제로 되돌아가서 답을 수정한다는 것은 CAT가 가지는 측정의 정확성 및 효율성에 악영향을 끼친다. 따라서 문제를 재검토하거나 응답내용을 수정하는 것은 대부분의 CAT에서 허락되지 않는다.
⑷ 보안성의 문제
CAT가 여러 번 진행되면서 처음에 평균 능력수준에 맞추어 제시되는 문제는 다수의 학생들에게 제시되어 진다. 또한 특정 능력수준에서 정보 값이 높은 문제는 그렇지 못한 문제에 비해 제시되는 빈도가 높다. 이러한 문제들은 문항 노출도가 높다고 표현되는데, 문항 노출도가 높을수록 그 문제의 보안성은 떨어진다고 할 수 있다.
⑸ 동일 지문을 공유하는 문제
CAT의 근간을 이루는 문항반응이론의 가장 중요한 가정은 검사의 일차원성과 지역독립성이다. 그러나 동일 지문을 공유하는 문제들(예, 하나의 일기 지문에 관련된 여러 개의 문제들)은 이러한 가정에 위배됨으로서 CAT에 부합되지 않는다. 이러한 이유로 토플 시험은 다른 영역(예, 듣기와 문법)은 CAT로 수행하지만 독해영역은 CT로 제한하고 있다.
⑹ 새로운 정보를 활용 가능케 하는 이론적 보강
앞에서 학생이 검사를 치르는데 소요한 시간 및 각 문제에 대한 시간, 학생이 검사를 치르는 양상에 관한 정보를 얻는 것이 CAT에서는 가능하다고 했다. 그러나 실제로 이러한 정보를 교수, 학습에 활용하기 위해서는 보다 많은 연구가 필요하다

키워드

교육공학,   우리나라 교육 청사진,   수업매체,   교수매체,   CAI,   CMI,   코스웨어,   통합학습시스템