목차
공통형: 타당도와 신뢰도를 각각 설명하되 교육현장에서 사용되고 있는 사례를 포함하여 구체적으로 설명하시오.(30점)
1, 타당도(validity)
1) 개념
2) 종류
3) 사례
2, 신뢰도(信賴度, reliability)
1) 개념
2) 종류
3) 사례
지정형(6-0번): 문항 유형별 제작과정에 대해 설명하시오.(20점)
1, 진위형 문항
2, 연결형 문항
3, 선다형 문항
4, 서답형 문항
참고문헌
1, 타당도(validity)
1) 개념
2) 종류
3) 사례
2, 신뢰도(信賴度, reliability)
1) 개념
2) 종류
3) 사례
지정형(6-0번): 문항 유형별 제작과정에 대해 설명하시오.(20점)
1, 진위형 문항
2, 연결형 문항
3, 선다형 문항
4, 서답형 문항
참고문헌
본문내용
지시문이나 답지를 통해 정답 단서를 제공하지 않아야 함
정답의 순서를 고르게 분포하며, 무작위로 배열해야 함
지시문에 ‘부정’을 나타내는 어구를 포함시키지 않는 것이 좋음
주관에 따라 정답이 달라질 수 있는 문항은 작성하지 말아야 함
답지마다 반복되는 문구는 지시문에 넣는 것이 좋음
4) 검토사항
선다형 문항을 예비적으로 작성함
문항의 내용이나 편집 상태 등을 검토함
정답이 없는 지 검토함
정답이 2개 이상인지를 검토함
정답이 분명한지 검토함
정답 단서가 해당 문항 또는 타 문항에 있는지 검토함
정답의 근거가 출제범위에 분명히 있는지 검토함
오답지가 지나치게 이질적인지를 검토함
답지의 길이가 비교적 균형을 이루는지 검토함
답지 길이가 짧은 것에서 긴 것으로 배열되었는지 검토함
지시문과 답지의 용어가 피평가자의 수준에 적합한지 검토함
지시문과 답지에 참고문헌의 문장을 그대로 옮겨 놓았는지 검토함
지나치게 쉽거나 어렵지 않은지 검토함
문항 내용이 지나치게 특수하거나 세부적이지 않은지 검토함
답을 구하는 시간이 길거나 짧지 않은지 검토함
시중 문제집의 문제 혹은 이미 출제된 문제인지 검토함
글자의 크기나 편집 상태가 적절한지 검토함
5) 장단점
(1) 장점
선다형 문항은 문항형식이 갖는 융통성 신축성이 크고, 시험의 난이도를 쉽게 조정할 수 있으며, 채점을 아주 빠르고 객관적으로 할 수 있을 뿐 아니라, 진위형이나 연결형보다 추측요인이 적게 작용하고, 진단평가, 형성평가, 총괄평가 등 모든 평가영역에서 광범위하게 사용할 수 있다는 장점을 지닌다.
① 읽기 능력이 부족한 학생의 평가에도 적절하다.
② 답지의 수가 적을수록 추측요인을 줄일 수 있다.
③ 시험의 난이도 조절이 쉽지 않다.
④ 학생들의 고등사고기능을 신장시키는 역할을 한다.
문항 형식이 갖는 융통성ㆍ신축성이 큼
단순 사실이나 법칙, 정보 등의 이해 여부의 파악은 적절함
시험의 난이도를 쉽게 조정할 수 있음
채점을 빠르고 객관적으로 할 수 있음
답지 수를 4개 이상으로 하면 추측요인을 많이 제거시킬 수 있음
모든 평가영역에서 광범위하게 사용할 수 있음
(2) 단점
진위형이나 연결형 문항에 비해 문항을 제작하기가 어려움
고등사고기능을 제대로 평가하기는 매우 어려움
교수-학습 과정에 대한 정보를 제공하지 않음
‘결과중심’의 교수-학습활동을 조장할 가능성이 높음
진위형 문항, 연결형 문항보다 시험시간에 제시할 수 있는 문항수가 적음
4, 서답형 문항
서답형 문항(supply type item)은 문두만 제시해 응답자로 하여금 답을 생각해서 쓰도록 하는 형식의 문항으로 답이 문항 내에 주어진 것이 아니라 써넣는 형태의 문항을 말한다. 이 형식은 응답자로 하여금 답을 스스로 생성하는 재생과정을 요구한다. 서답형 문항 제작과정을 보면 서답형 문항(supply type item)는 문제의 첫 머리만 제시하고 수험자가 응답할 수 있도록 한 문항으로 특정 답을 써넣는 형태의 문항을 말한다. 응답자 스스로 답을 생각해서 쓰도록 하는 형식의 문항으로 답이 문항 내에 주어진 것이 아니기 때문에 응답자로 하여금 답을 스스로 생성하는 재생과정을 요구한다.
1) 단답형 문항 제작과정
(1) 형식
보편적으로 단답형 문항의 경우 주로 의문문이나 명령문으로 문제를 제시하고 1~2개의 단어나 숫자, 기호, 짧은 구, 문장으로 답하도록 하는 문제의 형식을 따르는 것이 보통이다. 보편적으로 채점자의 주관이 개입될 여지가 없는 문항이나 길이가 긴 서술형 단답형은 주로 주관식 문항이고 단답형의 변형으로 볼 수 있고 일반적인 특성이 논문형 문항의 변형이라 할 수 있다.
(2) 문항 제작과정
우선 첫 번째로 단답형은 주로 기본적으로 정의나 간단한 개념·법칙·사실 등의 숙지 여부를 알아보기 위한 것이기 때문에 간단한 응답이 되도록 질문을 조성해야 한다. 두 번째로는 답이 거의 정해져 있기 때문에 채점하기 전에 미리 예상되는 정답들을 준비한다. 셋째, 때문에 교과서에 있는 구절의 형태와 같은 문장으로 질문하지 않고 변형하여 제시하기도 한다. 넷째, 혼선을 예방하기 위해 계산 문제의 경우 정답이 되기 위한 정확성 정도(예를 들어 소수점 자리 수)나 계산절차의 수준을 명시하여야 하며 정답이 숫자일 경우 단위를 표기해둬야 한다.
2) 완성형 문항 제작과정
(1) 형식
완성형의 경우 문자의 일부분을 일부로 비워 놓고 빈자리에 단어·구·숫자·기호 등을 써넣어 불 완전문을 완성하도록 하는 형식을 취하는 것이 보통이다.
(2) 문항 제작과정
완성형 문항 제작과정을 보면 첫째로 교사가 판단하기에 학습 상 중요한 내용을 여백으로 활용하여 문항으로 제시한다. 둘째, 정답이 가능한 단어나 기호로 응답하도록 질문지를 작성하여야 한다. 즉 모호한 답이 아니어야 한다. 셋째, 되도록 교과서의 문장을 그대로 사용하지 않고 각색하여 제시하는 것이 보통이다. 넷째, 질문의 여백 뒤에 조사가 정답을 암시하지 않게 해야 한다. 특히 을(를) 등 예측가능한 조사는 피한다. 다섯째, 채점의 정확성과 체계성을 위하여 통상 여백 하나하나를 채점 단위로 한다.
‘
3) 논문형 문항 제작과정
논문형 문항의 제작과정은 단답형이나 완성형과는 차이가 있다. 우선 첫 번째로 논술 문항의 지시문을‘이유를 설명하라’, ‘비교 분석하라’,‘견해를 논하라’ 등 논문에서 유래하는 문장을 사용한다. 둘째, 학습한 복잡한 내용들을 확인하는 것은 물론 이를 분석, 종합하여 비판적으로 사고하는지를 알아보는 보다 고등한 평가 문항이라고 할 수 있다. 세 번째, 민감한 사항으로 논쟁이 될 수 있는 논문형 문항은 피험자의 견해를 밝히도록 하고 해당 견해를 논리적으로 전개할 수 있도록 유도하는 문항을 제시하도록 설계한다. 네 번째, 논문형 문항의 특성상 문항의 답변 길이가 무한히 길어질 수 있으므로 몇 백자 내외 등 응답 길이를 제한해야 한다. 다섯째, 질문하고자 하는 요지가 명확히 구조화되도록 구성한다. 여섯째, 각 문항에 응답할 수 있도록 적절한 응답시간을 충분히 배려하고 문항 배열 시 쉬운 문항에서 어려운 문항으로 배열한다.
참고문헌
교육평가 한국방송통신대학교 출판문화원
정답의 순서를 고르게 분포하며, 무작위로 배열해야 함
지시문에 ‘부정’을 나타내는 어구를 포함시키지 않는 것이 좋음
주관에 따라 정답이 달라질 수 있는 문항은 작성하지 말아야 함
답지마다 반복되는 문구는 지시문에 넣는 것이 좋음
4) 검토사항
선다형 문항을 예비적으로 작성함
문항의 내용이나 편집 상태 등을 검토함
정답이 없는 지 검토함
정답이 2개 이상인지를 검토함
정답이 분명한지 검토함
정답 단서가 해당 문항 또는 타 문항에 있는지 검토함
정답의 근거가 출제범위에 분명히 있는지 검토함
오답지가 지나치게 이질적인지를 검토함
답지의 길이가 비교적 균형을 이루는지 검토함
답지 길이가 짧은 것에서 긴 것으로 배열되었는지 검토함
지시문과 답지의 용어가 피평가자의 수준에 적합한지 검토함
지시문과 답지에 참고문헌의 문장을 그대로 옮겨 놓았는지 검토함
지나치게 쉽거나 어렵지 않은지 검토함
문항 내용이 지나치게 특수하거나 세부적이지 않은지 검토함
답을 구하는 시간이 길거나 짧지 않은지 검토함
시중 문제집의 문제 혹은 이미 출제된 문제인지 검토함
글자의 크기나 편집 상태가 적절한지 검토함
5) 장단점
(1) 장점
선다형 문항은 문항형식이 갖는 융통성 신축성이 크고, 시험의 난이도를 쉽게 조정할 수 있으며, 채점을 아주 빠르고 객관적으로 할 수 있을 뿐 아니라, 진위형이나 연결형보다 추측요인이 적게 작용하고, 진단평가, 형성평가, 총괄평가 등 모든 평가영역에서 광범위하게 사용할 수 있다는 장점을 지닌다.
① 읽기 능력이 부족한 학생의 평가에도 적절하다.
② 답지의 수가 적을수록 추측요인을 줄일 수 있다.
③ 시험의 난이도 조절이 쉽지 않다.
④ 학생들의 고등사고기능을 신장시키는 역할을 한다.
문항 형식이 갖는 융통성ㆍ신축성이 큼
단순 사실이나 법칙, 정보 등의 이해 여부의 파악은 적절함
시험의 난이도를 쉽게 조정할 수 있음
채점을 빠르고 객관적으로 할 수 있음
답지 수를 4개 이상으로 하면 추측요인을 많이 제거시킬 수 있음
모든 평가영역에서 광범위하게 사용할 수 있음
(2) 단점
진위형이나 연결형 문항에 비해 문항을 제작하기가 어려움
고등사고기능을 제대로 평가하기는 매우 어려움
교수-학습 과정에 대한 정보를 제공하지 않음
‘결과중심’의 교수-학습활동을 조장할 가능성이 높음
진위형 문항, 연결형 문항보다 시험시간에 제시할 수 있는 문항수가 적음
4, 서답형 문항
서답형 문항(supply type item)은 문두만 제시해 응답자로 하여금 답을 생각해서 쓰도록 하는 형식의 문항으로 답이 문항 내에 주어진 것이 아니라 써넣는 형태의 문항을 말한다. 이 형식은 응답자로 하여금 답을 스스로 생성하는 재생과정을 요구한다. 서답형 문항 제작과정을 보면 서답형 문항(supply type item)는 문제의 첫 머리만 제시하고 수험자가 응답할 수 있도록 한 문항으로 특정 답을 써넣는 형태의 문항을 말한다. 응답자 스스로 답을 생각해서 쓰도록 하는 형식의 문항으로 답이 문항 내에 주어진 것이 아니기 때문에 응답자로 하여금 답을 스스로 생성하는 재생과정을 요구한다.
1) 단답형 문항 제작과정
(1) 형식
보편적으로 단답형 문항의 경우 주로 의문문이나 명령문으로 문제를 제시하고 1~2개의 단어나 숫자, 기호, 짧은 구, 문장으로 답하도록 하는 문제의 형식을 따르는 것이 보통이다. 보편적으로 채점자의 주관이 개입될 여지가 없는 문항이나 길이가 긴 서술형 단답형은 주로 주관식 문항이고 단답형의 변형으로 볼 수 있고 일반적인 특성이 논문형 문항의 변형이라 할 수 있다.
(2) 문항 제작과정
우선 첫 번째로 단답형은 주로 기본적으로 정의나 간단한 개념·법칙·사실 등의 숙지 여부를 알아보기 위한 것이기 때문에 간단한 응답이 되도록 질문을 조성해야 한다. 두 번째로는 답이 거의 정해져 있기 때문에 채점하기 전에 미리 예상되는 정답들을 준비한다. 셋째, 때문에 교과서에 있는 구절의 형태와 같은 문장으로 질문하지 않고 변형하여 제시하기도 한다. 넷째, 혼선을 예방하기 위해 계산 문제의 경우 정답이 되기 위한 정확성 정도(예를 들어 소수점 자리 수)나 계산절차의 수준을 명시하여야 하며 정답이 숫자일 경우 단위를 표기해둬야 한다.
2) 완성형 문항 제작과정
(1) 형식
완성형의 경우 문자의 일부분을 일부로 비워 놓고 빈자리에 단어·구·숫자·기호 등을 써넣어 불 완전문을 완성하도록 하는 형식을 취하는 것이 보통이다.
(2) 문항 제작과정
완성형 문항 제작과정을 보면 첫째로 교사가 판단하기에 학습 상 중요한 내용을 여백으로 활용하여 문항으로 제시한다. 둘째, 정답이 가능한 단어나 기호로 응답하도록 질문지를 작성하여야 한다. 즉 모호한 답이 아니어야 한다. 셋째, 되도록 교과서의 문장을 그대로 사용하지 않고 각색하여 제시하는 것이 보통이다. 넷째, 질문의 여백 뒤에 조사가 정답을 암시하지 않게 해야 한다. 특히 을(를) 등 예측가능한 조사는 피한다. 다섯째, 채점의 정확성과 체계성을 위하여 통상 여백 하나하나를 채점 단위로 한다.
‘
3) 논문형 문항 제작과정
논문형 문항의 제작과정은 단답형이나 완성형과는 차이가 있다. 우선 첫 번째로 논술 문항의 지시문을‘이유를 설명하라’, ‘비교 분석하라’,‘견해를 논하라’ 등 논문에서 유래하는 문장을 사용한다. 둘째, 학습한 복잡한 내용들을 확인하는 것은 물론 이를 분석, 종합하여 비판적으로 사고하는지를 알아보는 보다 고등한 평가 문항이라고 할 수 있다. 세 번째, 민감한 사항으로 논쟁이 될 수 있는 논문형 문항은 피험자의 견해를 밝히도록 하고 해당 견해를 논리적으로 전개할 수 있도록 유도하는 문항을 제시하도록 설계한다. 네 번째, 논문형 문항의 특성상 문항의 답변 길이가 무한히 길어질 수 있으므로 몇 백자 내외 등 응답 길이를 제한해야 한다. 다섯째, 질문하고자 하는 요지가 명확히 구조화되도록 구성한다. 여섯째, 각 문항에 응답할 수 있도록 적절한 응답시간을 충분히 배려하고 문항 배열 시 쉬운 문항에서 어려운 문항으로 배열한다.
참고문헌
교육평가 한국방송통신대학교 출판문화원
소개글