조사방법론-인과관계 추론과 집단설계

목차

1. 인과관계 추론의 기준

2. 내적타당도

3. 실험설계 (True Experimental Designs)

4. 유사실험설계 (Quasi-Experimental design)

5. 사회사업기관에서의 실험과 유사실험을 시행하는 과정의 실천상의 함정

본문내용

는 점진적인 변화를 초래한다. 이러한 경우에는 O4와 O5간에 발생하는 변화를 설명할 수 없다.
- 이 설계의 경우는 control group이 없기 때문에 selection은 문제가 되지 않는다.
- history 라는 internal validity 위협요소를 통제할 수 없다는 점이 가장 큰 약점이다
(2) The multiple Time-Series Design (다중시계열 설계)
; 시계열 분석에 비동일 통제집단설계를 가미한 설계
pretests treatment posttests
experimental group O1O2O3O4 X O5O6O7O8
comparison group O1O2O3O4 O5O6O7O8
- 가장 주요한 관심사는 O4 와 O5간의 어떤 차이가 발생하는가 있다.
- O4 와 O5 간의 차이가 다른 observation 간의 차이보다 크게 나타나는 경우 effect가 있다고 결론을 내릴 수 있다.
- field studies 에서는 결과가 불명확한 것처럼 나타나는 경우도 있다. 즉 experimental stimulus 에 의해 변화가 발생한 것인지 또는 다른 요소에 의해 발생하는 것인지 불분명한 경우가 다수
- time-series design (Q1)의 경우 history가 내적 타당도를 저해할 우려가 있기 때문에, control group을 덧붙여 이 요인을 통제하고자 한 설계
- 이 설계는 history를 포함한 모든 internal validity 저해요인을 통제할 수 있다.
- random assignment가 아니기 때문에 selection의 문제가 발생할 수도 있다. 그러나 이 경우 비교집단이 얼마나 유사한지를 보기 위해 pretest 단계에서 여러번의 관찰을 하기 때문에 이 selection의 문제는 preexperimental design 보다 심각하지는 않다.
- figure 10.3 outcome of multiple time series data
- human service 분야에서는 quasi-experimental design의 유용성이 아주 크다. 즉 동일한 클라이언트집단을 반복적으로 접촉을 하고, 이들에 관한 자료를 보관하고, 그 진행결과를 정기적으로 추적할 수 있기 때문이다.
(3) 복수집단 시계열설계(The different group time-series design)
pretests treatment posttests
R O1
R O2
R O3
R O4
R X
R O5
R O6
R O7
R O8
- time-series design 은 같은 집단을 반복적으로 관찰할 수 있다는 점을 전제로 한다. 따라서 연구대상자들의 협조를 필요로 하고, 그렇지 못한 경우는 이를 실시할 수 없다.
- Q1이 동일 집단을 대상으로 하는 반면에, different groups time-series design (Q2)는 randomly selected 된 다수의 다른 집단을 상이한 시간에 한번 관찰을 한다.
- Q1 과 마찬가지로 내적타당도를 저해하는 요인들을 통제할 수 있으며, O4와 O5간에 history event가 발생할 위험이 있다.
- 여러개의 상이한 집단을 측정하기 때문에 표본추출과정에 비용이 많이 들지 않는 경우에만 이용할 수 있는 한계가 있다.
- 많은 전화여론조사가 이 방법을 이용한다.
5. 사회사업기관에서의 실험과 유사실험을 시행하는 과정의 실천상의 함정
; 실험설계와 유사실험설계의 필요 요건을 이해하지 못하는 사람들에 의해 통제되는 기관환경에서 일어나는 경향이 있음.
1) 개입의 성실성
- 클라이언트에게 실제로 전달된 개입을 처음에 전달하고자 의도했던 방법으로 전달한 정도
- 장애요인; 새로운 프로그램을 실행하는데 늦어지거나 시작하는 데의 문제, 새로운 개입에 경험이 없거나 훈련을 받지 않은 직원 이용, 초기의 높은 직원 이직율, 직원의 열의상실 및 연구조사의 규정을 따르지 않는 기관의 슈퍼바이저가 제공하는 계속적인 슈퍼비전
2) 통제상황의 오염
; 통제상황이 통제집단과 실험집단 구성원들의 상호작용으로 오염될 수 있다.
3) 사례배정 규정에 대한 저항
; 실천가들이 실업집단이 통제집단보다 더 많은 서비스를 제공하기 때문에 가장 욕구가 큰 클라이언트들을 실험집단으로 배정시키려는 압력을 느끼게 된다.
4) 클라이언트 모집과 유지
; 연구조사가 외부기관으로부터 클라이언트를 의뢰받아야만 할 때 연구에 참여할 충분한 수의 클라이언트를 모집하는 문제가 발생할 수 있다.
* 대처방안
- 기관 직원들이 연구조사의 설계에 참여토록 하여, 처음부터 그들의 지지를 얻음.
- 실험조건과 통제조건을 별도의 건물이나 기관에 배치함 - 통제조건의 오염을 피함.
- 계속적으로 클라이언트를 모집하기 위한 계획을 수립
6. 외적타당도(External validity)
- 실험에 의해 인과관계를 규명하는 경우, 연구자는 자연적으로는 발생하지 않는 상황을 발생하도록 만든다. 따라서 실험설계의 결과는 실제상황보다 아주 단순화된 것이라고 볼 수 있다.
- "Unnaturalness"는 external validity의 문제를 발생시킨다.
- 외적 타당도는 실험설계에 의한 인과관계의 추론은 다른 시간, 다른 상황이나 다른 집단의 사람들에게 일반화 할 수 있는가의 문제와 관련이 된다.
- 외적 타당도의 문제는 표본에 기반한 결과를 모집단에 적용할 수 있는가의 문제와 유사.
- 외적타당도에 영향을 미치는 주요 요인은 연구표본, 상황, 그리고 과정의 대표성이다.
External validity 저해 요인
- 내용이 모호하거나 짧다는 것이다; 연구대상의 모호성
예) 학생실천가 vs. 전문적 사회사업실천가
- 연구조사의 반응성
; 클라이언트가 자신이 실험에 참여하고 있다는 것을 인식하면, 그 인식 때문에 실험 상황을 넘어서서 일반화할 수 없는 종속변수의 변화를 야기할 수 있다.
예) 자기감시나 가실험효과
R O1 X O2
R O1 O2
R O1 P O2
1) 횡단연구
; 시간-순서를 고려하지 못함
; 상관관계 그 자체가 불일치와 행동장애 모두를 야기할 수 있는 다른 변수를 배제하지도 않음.==> 다원기법을 이용

키워드

내적타당도,   실험설계,   다원기법,   유사실험설계,   다중시계열