실험조사설계의 기본 요소와 타당도

소개글

실험조사설계의 기본 요소와 타당도에 대한 보고서 자료입니다.

목차

1, 인과관계 추론의 기준
2, 실험조사설계의 요건
3. 실험조사설계의 타당도

본문내용

수도 있다(선정과
성숙의 상호작용).
실업계 고등학교와 인문계 고등학교 학생을 대상으로 실험집단과 통제집단으
로 구분하고 학습흥미 강화를 위한 집단 프로그램을 실시하였을 때, 프로그램
이 진행되는 동안 실업계 고등학교 학생의 탈락률은 인문계 고등학교 학생의
탈락률 보다 월등하게 높게 나타났고, 사후검사에서 실업계 학생의 학습흥미도
가 향상 된 것으로 나타났다. 이 경우 실험집단에 속해 있는 실업계 학생의 학
습흥미도 상승이 프로그램의 효과로 말미암은 것인지 아니면 학습흥미를 잃은
학생의 탈락으로 말미암아 남은 학생의 학습흥미도가 높아진 것인지 명확하게
구분할 수 없다(선정과 탈락의 상호작용).
이상의 내적 타당도를 저해하는 다양한 요소를 통제하기 위한 최선의 방법은 무엇보다
무작위 배정과 통제집단의 활용이다.Mitchell과 Jolley(1988)는 이러한 여덟 가지 내적 타당
도를 위협하는 요인을 제거하거나 감소시키기 위하여 다음과 같은 제안을 하고 있다.
tip 내적 타당도에 대한 대책
조사연구의 시작과 끝, 즉 조사연구 기간을 짧게 유지하라. 이것은 역사적 사
건의 위협 요인을 줄이는 데 도움을 주며, 어린이나 유년기에 대해 연구할 때
성숙 효과, 선정과 성숙의 상호작용의 위협 요인을 줄일 수 있다.하지만 시계
열 연구에서는 이것이 적용되지 않는다.
측정도구를 한 번만 사용하거나 사후측정에서는 조금 다른 측정도구를 사용하
라. 그렇게 한다면 측정의 영향을 줄일 수 있다.
연구요원에게 훈련을 통해 측정 시 동일한 방법(절차)을 시행하도록 하라. 이
는 측정도구와 관련된 영향을 줄일 수 있다.
연구 대상자, 특히 통제집단 참여자와 접촉을 계속 유지하라. 실험 대상자의
자연 감소 및 소멸을 방지할 수 있다.
극단적인 측정값을 보이는 대상자를 피하라. 즉, 한 번의 극단적인 측정값으로
대상자를 선정하지 않도록 하라. 그러면 통계적 회귀를 통제할 수 있다.
가능하면 무작위 배정을 활용하고, 아니면 실행 가능한 많은 변수에 배합
(matching)하도록 하라. 이는 참여자 선정 문제를 해결할 수 있다.
2) 외적 타당도
외적 타당도는 ‘실험조사 결과를 어느 정도 일반화할 수 있는가?’의 문제, ‘다른 대상자
및 다른 상황에서도 동일한 결과가 가능한가?’에 관한 것이다. 즉, 한 지역사회복지관에서
실시한 ‘부모교육 프로그램’이 효과가 있는 것으로 나타났을 경우, 다른 복지관에서 동일한
프로그램을 실시하여 동일한 효과가 나타나게 되면 이 조사연구의 외적 타당도는 높다고
할 수 있다.
일반적으로 실험조사설계에서 외적 타당도에 영향을 주는 위협 요인은 다음과 같다
(Campbell& Stanley,1963).
측정의 반응 효과(reactiveorinteractiveeffectoftesting)실험조사를 수행하면서
사전측정을 함으로써 응답자의 민감성과 인식에 영향을 주어 조사 대상자를 모집단을
대표할 수 없는 대상자로 만드는 것이다. 즉, 사전측정으로 응답자에게 조사를 의식하게
하거나 자신이 조사연구와 관련되어 있다는 것을 깨닫게 함으로써 스스로 조사에 대한 반
응 및 민감성(placeboeffects)을 보이게 만든다. 이러한 위협 요인은 내적 타당도를 위협하
는 측정 효과와 같다.
참여자 선정과 연구 속성의 상호작용(interaction effects of selection biases and
researchstimulus)이것은 조사 대상자를 무작위로 구하기 어려울 때 생기는 문제다. 지금
수행하고자 하는 조사연구가 2~3시간 동안 심도 있는 인터뷰를 요구하는 연구라면 대부분
의 사람은 접촉하는 것을 거절하거나 참여하지 않을 것이다. 또한 참여하게 되는 사람도 시
간이 많거나 외로운 사람이 대부분이므로 모집단을 정확히 대표할 수 없어 연구 결과의 일
반화에 영향을 줄 것이다.
실험 세팅의 영향(reactiveeffectsofarrangements)연구 대상자가 일상적으로 느끼는
상황과 다른 환경에서 실험조사연구가 진행될 때, 연구 대상자의 반응은 색다른 환경 때문
에 변화하게 될지도 모른다. 예를 들면,자신의 모습이 녹화된다거나 이중 거울로 관찰될
때, 연구 대상자는 좀 더 잘하려고 노력하거나 근심스러워하거나 당황하면서 그들의 행동을
자연스럽게 표현하지 못할 수도 있다.
다중치료의 효과(multiple-treatmentinteraction)이것은 실험조사에서 개입이 여러 차례
있을 경우 생기는 문제로, 실제 실험집단의 각 대상자들에게 개입의 시간이나 순서가 동일
하게 적용되기는 어렵다. 그리고 다중개입은 누적효과가 있어 구체적인 개입의 효과를 정확
하게 측정하기가 어렵다.
일반적으로 실험조사설계에는 항상 내적, 외적 타당도에 대한 위협 요소가 도사리고 있
다. 이 경우 무작위 배정과 통제집단을 사용하여 내적 타당도의 저해 요인을 상당 부분 대
처할 수 있다.보통 실험이나 환경에 대한 통제가 많을수록 내적 타당도는 높아지지만 그에
상응하는 외적 타당도에 희생이 따르게 마련이다. 그리고 사회복지학에서 조사연구는 실험
실이 아니라 현장에서 이루어지므로 실제 사회복지기관에서 수행되는 실험조사설계는 그
원칙과 이상에서 타협이 있을 수밖에 없다. 그러므로 모든 조사연구는 이런저런 제한점이나
약점을 갖게 마련이라는 점을 인식해야 한다.
외적 타당도에 대한 대책
실험조사가 어떤 특정 프로그램이나 특정 지역에 국한하는 프로그램을 평가하는
경우에는 외적 타당도가 그다지 중요하지 않다. 하지만 조사연구가 실시된 환경과
세팅을 넘어서 조사 결과를 일반화하고자 한다면 다음 사항에 유의해야 할 것이다.
조사 대상자가 그 적용될 집단의 대표성을 갖도록 한다.
개입 자체가 분명하고 구조화되어야 한다.
조사 진행 요원은 훈련되고 자질을 갖춘 사람으로 하며 개입이 동일하게 진행
되도록 한다.
참고문헌
김 영종 사회복지조사방법론 학지사 1999
열린교육-사회복지사1급기본서사회복지조사론
박문각-감이좋은사회복지학개론
김기원, 『사회복지조사론』, 나눔의 집, 2001
김병진, 『사회복지조사방법론』, 법문사, 2006
김치영, 『사회복지조사론』, 교문사, 2007
김훈, 『사회복지조사방법론』, 대왕사, 2006

키워드

설문지,   서베이,   설문조사,   표집,   표본추추출,   사회조사,   과학적조사,   실험설계,   사회과학