측정의 평가기준 - 타당도(Validity)와 측정도구의 타당화 방법, 신뢰도(Peliability)의 의의와 평가기법, 신뢰도와 타당도에 영향을 미치는 요인 및 측정 오류

소개글

측정의 평가기준 - 타당도(Validity)와 측정도구의 타당화 방법, 신뢰도(Peliability)의 의의와 평가기법, 신뢰도와 타당도에 영향을 미치는 요인 및 측정 오류에 대한 보고서 자료입니다.

목차

Ⅰ. 측정의 평가기준

Ⅱ. 타당도(Validity)
　1. 표면(액면)타당도
　2. 내용타당도
　3. 기준관련타당도
　4. 구체적 타당도

Ⅲ. 측정도구의 타당화 방법
　1. 논리적 타당화법
　2. 전문가 의견법
　3. 집단비교법
　4. 독립기준법

Ⅳ. 신뢰도(Peliability)
　1. 신뢰도의 의의
　2. 신뢰도의 평가기법
　　(1) 재검사법
　　(2) 복수양식법/대안법
　　(3) 반문법

Ⅴ. 타당도와 신뢰도의 상호관계
　1. 신뢰도와 타당도의 상관관계
　2. 신뢰도는 타당도를 높이기 위한 필요조건
　3. 타당도가 있으면 반드시 신뢰도가 있다

Ⅵ. 신뢰도와 타당도에 영향을 미치는 요인
　1. 조사도구
　2. 조사환경
　3. 조사대상자
　4. 조사자의 해석

Ⅶ. 측정 오류(Measurement Error)
　1. 체계적 오류
　2. 무작위적 오류
　3. 오류를 피하는 방법

참고문헌

본문내용

하여 지능검사를 실시하면 흑인아이들의 지능지수는 낮게 나옴. 이유는 백인 중산층의 용어를 아이들이 이해하지 못하기 때문. 마찬가지로 어른을 위해 개발된 설문지를 아이에게 적용하여 대답을 얻으면 어른의 언어를 아이가 이해하지 못해 제대로 된 답을 얻을 수 없게 됨. 이와 인구학적 특성, 교육정도, 사회경제적 지위, 인종, 문화, 종교 등의 이유가 있을 수 있음
2. 무작위적 오류
- 무작위 오류는 오류가 발생하는 원인이 체계적 오류에서처럼 일정한 패턴이 없이 나타나며, 따라서 오류를 통제하기 어려움
- 오류의 예
① 개인의 일시적 속성
: 신체적, 정신적, 건강상태, 기분, 동기, 관심의 집중도, 권태, 긴장의 정도 등을 포함
→ 예 : 응답자가 설문에 응답하기 전날 잠을 늦게 자 응답하는 날 너무 졸려서 제대로 응답을 못하는 경우
② 상황적 요인
: 익명성과 동료 등 다른 사람의 참석과 같은 사회적 상황이 측정상에 원하지 않는 변이의 원천을 만들 수 있다.
→ 예 : 응답하면서 지나치게 긴장한다든지 하는 상황적 요인
③ 물리적 요인
: 응답하는 장소의 물리적 특성 때문에 오류가 발생하는 경우. 예 : 응답하는 장소가 너무 덥거나 추운 경우 응답을 끝까지 제대로 하기 어려워 대충 답하고 나가면 이로 인해 좋은 답을 얻을 수 없게 됨
3. 오류를 피하는 방법
① 체계적 오류를 최소화하기 위해 측정도구를 만들 때 편견이 담긴 언어는 사용하지 않는 것이 좋음. 또한 응답자가 이해할 수 있는 언어를 사용해야 함
② 조사자를 사전에 훈련하여 응답자가 질문의 뜻을 잘 이해하도록 해야 함. 조사자가 훈련되어 있지 않으면 여러 가지 해석이 가능한 경우 조사자마다 다른 해석을 하여 응답에 일관성이 없게 됨
③ 만약 관찰을 통한 조사라면 클라이언트가 관찰당하고 있다는 사실을 모르는 것이 오류를 줄일 수 있는 방법. 자신이 관찰되고 있다는 사실을 알면 부자연스러운 행동과 과장된 행동이 나올 수 있기 때문.
④ 만약 기존의 자료를 이용한다면 너무 그 자료를 신뢰해서는 안됨. 잘못 조사된 자료일 수도 있으므로 이 자료를 보충해 줄 수 있는 다른 자료를 찾아보는 것이 좋음.
⑤ 자료수집시 한 가지 방법에만 의존하지 말고 여러 가지 다른 자료수집방법을 활용하는 것이 좋음. 이를 전문적 용어로 다각적 자료수집법(triangulation)이라고 함. 즉 서베이를 통해 자료를 얻었다면 이를 보충할 기존의 자료나 관찰 등의 방법을 추가해 얻어진 자료와 일치하는 정보인지 검토해 보는 것이 좋음.
⑥ 응답자가 응답하는 환경에 대해 미리 세심한 배려를 하여 환경으로 인해 제대로 된 응답을 못하는 경우를 사전에 방치하여 무작위 오류 발생을 예방하도록 해야 함
⑦ 신뢰도와 타당도를 가진 도구를 이용하여 오류발생을 줄일 수 있음
[정리]
- 측정의 평가기준에는 신뢰도와 타당도가 있다. 신뢰도는 측정도구가 측정하고자 하는 현상을 일관되게 측정하는가에 관한 것이고, 타당도는 측정도구가 실제로 측정하고자 하는 개념을 측정하고 있는가, 그 개념이 정확히 측정되었는가의 문제이다.
- 타당도의 종류에는 연구자가 측정하고자 하는 것을 외견상 어느 정도 나타내 주고 있느냐를 말하는 표면(액면)타당도, 작성된 측정도구의 항목들이 조사자가 측정하고자 하는 내용을 잘 담고 있는가를 나타내는 것으로 전문가에 동의에 의해 결정되는 내용타당도, 현재 개발된 측정도구의 측정값과 이미 전문가가 만들어 놓은 측정도구를 기준측정도구로 하여 이 두 도구간의 상관관계가 높게 나타나면 타당도가 있다고 말할 수 있는 기준관련타당도, 측정 도구가 실제로 측정하고자 하는 개념을 측정하는지를 이론적 관련성을 가지고 나타내는 구성체 타당도 등이 있다.
- 측정도구의 타당화 방법에는 측정도구의 항목을 이론적 또는 상식적으로 분석하여 타당도를 확보하는 논리적 타당화법, 측정도구가 측정하고자 하는 문제에 관한 전문가로 생각되는 사람들의 논리적 판단에 의거하여 타당도를 확보하는 전문가 의견법, 상반된 태도나 특성을 가진 두 개의 집단을 선정하고 그 두 집단에 측정도구를 적용하여 그 결과의 차가 상반된 태도를 나타내는가를 통해 타당도를 살피는 집단비교법, 질문지에 질문내용의 응답들을 판별하는데 기준이 될 수 있는 문항을 포함시켜 질문지를 만든 후 이를 조사대상자에게 적용하여, 그 기준이 되는 문항에 대한 점수와 다른 문항들의 합계점수간의 상관관계에 의해 타당도를 검증하는 독립기준법 등이 있다.
- 신뢰도란 측정도구가 측정하고자 하는 현상을 일관되게 측정하는 능력을 말한다.
- 신뢰도의 평가방법에는 똑같은 측정도구를 가지고 똑같은 대상에게 일정한 간격을 두고 반복측정해 신뢰도를 평가하는 재검사법, 유사한 형태의 두 개의 측정도구를 만들어 이것을 각각 동일한 대상에 차례로 적응하여 봄으로써 신뢰도를 측정하는 복수양식법, 척도의 질문을 무작위적으로 반씩 나누어 둘로 만든 후 척도를 피조사자들에게 적용한 다음 두 부분의 결과를 비교하여 상관관계를 계산하여 봄으로써 신뢰도를 측정하는 반문법 등이 있다.
- 신뢰도와 타당도는 측정도구의 적합성을 평가하는 방법으로 서로 분리된 속성으로 다루어졌지만 서로 밀접히 관련되어 있는데, 도구가 측정해야 할 개념을 측정하고 있다면 신뢰도가 있다고 볼 수 있다.
- 신뢰도와 타당도에 영향을 미치는 요인에는 측정길이, 질문문항의 모호성, 측정문항 수, 인쇄 및 편집 등 조사도구, 조사환경, 조사자의 해석 등이 있을 수 있다.
- 측정 오류에는 체계적 오류와 무작위오류가 있는데, 체계적 오류란 측정도구가 잘못되어 연구자가 수집하고자 하는 정보를 얻을 수 없을 때 발생하는 오류를 의미하고, 무작위 오류는 오류가 발생하는 원인이 체계적 오류에서처럼 일정한 패턴이 없이 나타나며, 오류를 통제하기 어렵다. 조사자는 조사과정 내내 이러한 오류를 피하기 위해 노력해야 한다.
참고문헌
김갑용, 전남련 외 저, 사회복지조사론, 정민사 2013
이상일 저, 사회복지조사와 평가, 동문사 2008
채구목 저, 사회복지조사방법론, 양서원 2013
양정하, 황인옥 외 저, 사회복지조사론, 정민사 2013
이현심, 이명순 외 저, 사회복지 실천론, 파란마음 2013

키워드

타당도,   측정도구의 타당화 방법,   신뢰도,   신뢰도의 평가기법,   타당도와 신뢰도의 상호관계,   신뢰도와 타당도에 영향을 미치는 요인,   측정 오류,   측정의 평가기준,   측정