목차
ꊱ 측정 수준
1) 명목척도
2) 순위척도
3) 등간척도
4) 비율척도
5) 측정수준이 갖는 함의
ꊲ 개별 또는 복합지수들
ꊳ 측정오류의 흔한 출처
1) 체계적 오류
2) 무작위 오류
3) 측정오류의 실례
ꊴ 측정오류 피하기
ꊵ 신뢰도(reliability)
1) 신뢰도의 개념
2) 신뢰도 유형
3) 신뢰도 제고방안
ꊶ 타당성
1) 기준-관련 타당성(criterion-related validity)
2) 개념구성타당성(construct validity)
3) 내용타당성(content validity)
ꊷ 사회복지에서 신뢰적이고 타당한 척도의 실례 : 임상적 척도 일괄모음
ꊸ 신뢰도와 타당성의 관계
ꊹ 질적 연구조사에서의 신뢰도와 타당성
1) 명목척도
2) 순위척도
3) 등간척도
4) 비율척도
5) 측정수준이 갖는 함의
ꊲ 개별 또는 복합지수들
ꊳ 측정오류의 흔한 출처
1) 체계적 오류
2) 무작위 오류
3) 측정오류의 실례
ꊴ 측정오류 피하기
ꊵ 신뢰도(reliability)
1) 신뢰도의 개념
2) 신뢰도 유형
3) 신뢰도 제고방안
ꊶ 타당성
1) 기준-관련 타당성(criterion-related validity)
2) 개념구성타당성(construct validity)
3) 내용타당성(content validity)
ꊷ 사회복지에서 신뢰적이고 타당한 척도의 실례 : 임상적 척도 일괄모음
ꊸ 신뢰도와 타당성의 관계
ꊹ 질적 연구조사에서의 신뢰도와 타당성
본문내용
nvergent validity )
같은 개념을 측정하는 경우에는 상이한 측정방법을 사용하더라도 그 측정값들 간에 높은 상관관계가 존재해야 한다.
b. 판별타당성(discriminant validity)
상이한 개념을 측정하는 경우에는 동일한 측정방법을 사용하더라도 그 측정값 간에는 차별성이 나타나야 한다.
c. 이해 타당성
이론에 근거하여 구성(개념)들 간의 관계가 예상한대로 나타나고 있는지의 여부를 평가하여 구성개념 타당성을 평가하는 방법
● 평가방법
a. 다속성 다측정방법 (multitrait-multimethod matrix)
2개 이상의 개념에 대해 측정할 수 있는 도구를 각각 2개 이상 개발하고 집중타당 성과 판별타당성을 평가
b. 요인분석(factor analysis)
다수의 상호관련된 변수나 문항들을 보다 제한된 수의 자원이나 공통요인으로 분류하는 통계분석 기법으로 요인분석의 기본원리는 항목들 간의 상관관계가 높을 것끼리 하나의 요인으로 묶어내며, 요인들간에는 상호독립성을 유지하도 록 하는 것
하나의 요인으로 묶여진 측정항목들은 하나의 개념을 측정하는 것으로 간주할 수 있고, 요인 간에는 서로 상관관계가 없으므로 각 요인들은 서로 상이한 개 념이 된다.
요인내의 항목들은 집중타당성에 해당되며 요인 간에는 판별타당성이 적용되는 것으로 해석할 수 있다.
(3) 내용타당성(content validity)
측정 도구 자체가 측정하고자 하는 속성이나 개념을 측정할 수 있도록 되어있는가를 평가하는 것
● 확보방법
■ 측정도구의 모든 방법을 나열하여 무작위표출
■ 측정도구의 내용을 정확히 하는 것
ex) 4지선다형의 시험을 본다면 반드시 정담이 그 안에 포함되어야 한다.
■ 측정도구가 순서대로 이루어지는 경우 순서를 일정하게 해야 한다.
● 평가방법 : 전문가의 주관적인 판단
ex) A행정학 교수의 행정학 객관식 출제문제의 내용타당성 평가
행정학 객관식 문제의 모집단은 이론적으로만 존재하고 실제는 존재하지 않으 므로 문항의 모집단에서 무작위표출을 통해 시험문제를 구성하는 것이 불가능 하므로 전문가인 동료교수에게 시험문제의 내용을 평가하게 한다.
● 장점
통계적인 절차를 사용하지 않고 직접 이용할 수 있으며 적용이 용이하고 시간이 많 이 소요되지 않는다.
● 단점
■조사자의 주관적 해석과 판단에 의존하므로 판단에 오차나 착오가 발생할 수 있다.
■ 측정하려는 속성과 항목간의 상관관계를 파악할 수 없다.
■ 통계적 검증이 어렵다.
사회복지에서 신뢰적이고 타당한 척도의 실례 : 임상적 척도 일괄모음
■ 1970년대 중반, Walter Hudson과 그의 동료 = 9개의 척도는 집합적으로 임상적 척도 일괄모음(The Clinical Measurement Package)
■ 9개의 개념은 우울증, 자존심, 부부간 불화, 성적불화, 아이에 대한 부모의 태도, 아버지에 대한 아이의 태도, 어머니에 대한 아아의 태도, 가족내부의 스트레스, 또래관계
신뢰도와 타당성의 관계
■ 척도가 신뢰적인 것이 바람직할지라도 그것의 신뢰도가 그것이 타당함을 보증하지는 않는다.
ex) 아이를 계속 학대하고 있더라도 아버지는 질문할 때마다 부인함
● 관계
타당성 있는 측정은 항상 신뢰성이 있으며 신뢰성 없는 측정은 타당도가 보장되지 않는 다. 측정도구의 신뢰도가 타당도에 비해 확보하기가 용이한 이점이 있기는 하나 일반적 으로 타당도의 수립이 보다 더 가치가 있다.
● 타당도와 신뢰도에 영향을 미치는 요인
■ 검사도구 및 그 내용
a.측정의 길이 : 질문이 길어져 조사대상자가 실증을 느끼면 편의주의적형식적 응 답이 발생
b. 문화적 요인 : 관례상 사용되지 않는 단어나 문구 포함 시 문제
c. 개방형 질문과 폐쇄형 질문 : 개방형 질문 시 응답자의 능력교육수준에 영향을 받는다.
d. 기계적인 요인 : 질문지의 탈자, 오자, 읽기 어려운 단어페이지의 누락 등은 오 해를 유발
■ 환경적 요인
a. 대인면접시 면접자의 개인적 특성의 영향과 개방형질문의 경우 타인의 영향
b. 측정정구를 완성하는데 필요한 제시의 명백성
■ 개인적 요인: 응답자의 사회경제적 지위 : 직업, 소득, 교육수준 등과 성별, 연령
■ 사회적 요청: 응답자들이 진실을 밝히기보다는 사회적으로 바람직하다고 하는 것을 응답
■ 조사자의 편견: 조사자의 해석으로 코딩 시 조사자 편견개입
질적 연구조사에서의 신뢰도와 타당성
■청소년 우울증에 관한 양적 연구
우울증 정도 또는 우울증의 정도가 다른 변수들과의 관련성 평가위해 - 큰 청소년 표본대상 - 표준화된 우울증 척도를 실시
⇒ 중요한 이슈는 우울증 척도의 신뢰도아 타당성.
■청소년의 우울증에 관한 질적 연구
표준화된 측정도구에 의존하지 않음. 적은 청소년 표본, 한사람과 주변사람에 대한 광범위하고 다양한 직접관찰과 심도 깊은 면적을 실시할 가능성이 큼
■일반화하려는 대신 그들의 상황, 상황을 경험하는 방식, 경험의 주관적 의미, 필요 하다고 느끼는 것에 대한 깊은 이해제공.
질적 연구에서는 신뢰도와 타당성의 역할에 대한 다른 관점을 취할 필요성 ■ 양적 연구에서의 신뢰도와 타당성의 중요한 역할 이해.
◎Jane Kronick (1998-Bryn Mawr 대학 사회사업학과 교수)
= 질적 해석의 타당성을 평가하기 위한 4가지 기준
a. 양적 연구의 내적 일관성 신뢰도와 유사하다. 즉 본문 해석은 본문 전체 또는 다른 부분과 일치해야 한다. “내적으로 일관적”
b. 해석은 모든 증거를 고려한 완전한 것이어야만 한다.
c. "확신“을 포함한다 - 본문안의 증거에 비추어 설득력있어야 함.
d. 해석은 의미심장해야한다.
※질적 연구에서 신뢰도와 타당성에 대한 한계
a. 연구 대상자들이 연구자의 관찰 또는 해석의 정확성을 확증시키지 못할 수도 있다.
b. 제 2평가자가 제 1 평가자의 해석을 확증시키지 못할 경우도 있다.
참고문헌
1. A.루빈 & E.바비(2000), 사회복지조사방법론, 서울:나남출판
2. 김영종, 사회복지조사방법론, 학지사
3. 김종천, 사회복지조사론, 대학출판사
4. 채서일(1992), 사회과학조사방법론(제2판), 서울: 현학사
같은 개념을 측정하는 경우에는 상이한 측정방법을 사용하더라도 그 측정값들 간에 높은 상관관계가 존재해야 한다.
b. 판별타당성(discriminant validity)
상이한 개념을 측정하는 경우에는 동일한 측정방법을 사용하더라도 그 측정값 간에는 차별성이 나타나야 한다.
c. 이해 타당성
이론에 근거하여 구성(개념)들 간의 관계가 예상한대로 나타나고 있는지의 여부를 평가하여 구성개념 타당성을 평가하는 방법
● 평가방법
a. 다속성 다측정방법 (multitrait-multimethod matrix)
2개 이상의 개념에 대해 측정할 수 있는 도구를 각각 2개 이상 개발하고 집중타당 성과 판별타당성을 평가
b. 요인분석(factor analysis)
다수의 상호관련된 변수나 문항들을 보다 제한된 수의 자원이나 공통요인으로 분류하는 통계분석 기법으로 요인분석의 기본원리는 항목들 간의 상관관계가 높을 것끼리 하나의 요인으로 묶어내며, 요인들간에는 상호독립성을 유지하도 록 하는 것
하나의 요인으로 묶여진 측정항목들은 하나의 개념을 측정하는 것으로 간주할 수 있고, 요인 간에는 서로 상관관계가 없으므로 각 요인들은 서로 상이한 개 념이 된다.
요인내의 항목들은 집중타당성에 해당되며 요인 간에는 판별타당성이 적용되는 것으로 해석할 수 있다.
(3) 내용타당성(content validity)
측정 도구 자체가 측정하고자 하는 속성이나 개념을 측정할 수 있도록 되어있는가를 평가하는 것
● 확보방법
■ 측정도구의 모든 방법을 나열하여 무작위표출
■ 측정도구의 내용을 정확히 하는 것
ex) 4지선다형의 시험을 본다면 반드시 정담이 그 안에 포함되어야 한다.
■ 측정도구가 순서대로 이루어지는 경우 순서를 일정하게 해야 한다.
● 평가방법 : 전문가의 주관적인 판단
ex) A행정학 교수의 행정학 객관식 출제문제의 내용타당성 평가
행정학 객관식 문제의 모집단은 이론적으로만 존재하고 실제는 존재하지 않으 므로 문항의 모집단에서 무작위표출을 통해 시험문제를 구성하는 것이 불가능 하므로 전문가인 동료교수에게 시험문제의 내용을 평가하게 한다.
● 장점
통계적인 절차를 사용하지 않고 직접 이용할 수 있으며 적용이 용이하고 시간이 많 이 소요되지 않는다.
● 단점
■조사자의 주관적 해석과 판단에 의존하므로 판단에 오차나 착오가 발생할 수 있다.
■ 측정하려는 속성과 항목간의 상관관계를 파악할 수 없다.
■ 통계적 검증이 어렵다.
사회복지에서 신뢰적이고 타당한 척도의 실례 : 임상적 척도 일괄모음
■ 1970년대 중반, Walter Hudson과 그의 동료 = 9개의 척도는 집합적으로 임상적 척도 일괄모음(The Clinical Measurement Package)
■ 9개의 개념은 우울증, 자존심, 부부간 불화, 성적불화, 아이에 대한 부모의 태도, 아버지에 대한 아이의 태도, 어머니에 대한 아아의 태도, 가족내부의 스트레스, 또래관계
신뢰도와 타당성의 관계
■ 척도가 신뢰적인 것이 바람직할지라도 그것의 신뢰도가 그것이 타당함을 보증하지는 않는다.
ex) 아이를 계속 학대하고 있더라도 아버지는 질문할 때마다 부인함
● 관계
타당성 있는 측정은 항상 신뢰성이 있으며 신뢰성 없는 측정은 타당도가 보장되지 않는 다. 측정도구의 신뢰도가 타당도에 비해 확보하기가 용이한 이점이 있기는 하나 일반적 으로 타당도의 수립이 보다 더 가치가 있다.
● 타당도와 신뢰도에 영향을 미치는 요인
■ 검사도구 및 그 내용
a.측정의 길이 : 질문이 길어져 조사대상자가 실증을 느끼면 편의주의적형식적 응 답이 발생
b. 문화적 요인 : 관례상 사용되지 않는 단어나 문구 포함 시 문제
c. 개방형 질문과 폐쇄형 질문 : 개방형 질문 시 응답자의 능력교육수준에 영향을 받는다.
d. 기계적인 요인 : 질문지의 탈자, 오자, 읽기 어려운 단어페이지의 누락 등은 오 해를 유발
■ 환경적 요인
a. 대인면접시 면접자의 개인적 특성의 영향과 개방형질문의 경우 타인의 영향
b. 측정정구를 완성하는데 필요한 제시의 명백성
■ 개인적 요인: 응답자의 사회경제적 지위 : 직업, 소득, 교육수준 등과 성별, 연령
■ 사회적 요청: 응답자들이 진실을 밝히기보다는 사회적으로 바람직하다고 하는 것을 응답
■ 조사자의 편견: 조사자의 해석으로 코딩 시 조사자 편견개입
질적 연구조사에서의 신뢰도와 타당성
■청소년 우울증에 관한 양적 연구
우울증 정도 또는 우울증의 정도가 다른 변수들과의 관련성 평가위해 - 큰 청소년 표본대상 - 표준화된 우울증 척도를 실시
⇒ 중요한 이슈는 우울증 척도의 신뢰도아 타당성.
■청소년의 우울증에 관한 질적 연구
표준화된 측정도구에 의존하지 않음. 적은 청소년 표본, 한사람과 주변사람에 대한 광범위하고 다양한 직접관찰과 심도 깊은 면적을 실시할 가능성이 큼
■일반화하려는 대신 그들의 상황, 상황을 경험하는 방식, 경험의 주관적 의미, 필요 하다고 느끼는 것에 대한 깊은 이해제공.
질적 연구에서는 신뢰도와 타당성의 역할에 대한 다른 관점을 취할 필요성 ■ 양적 연구에서의 신뢰도와 타당성의 중요한 역할 이해.
◎Jane Kronick (1998-Bryn Mawr 대학 사회사업학과 교수)
= 질적 해석의 타당성을 평가하기 위한 4가지 기준
a. 양적 연구의 내적 일관성 신뢰도와 유사하다. 즉 본문 해석은 본문 전체 또는 다른 부분과 일치해야 한다. “내적으로 일관적”
b. 해석은 모든 증거를 고려한 완전한 것이어야만 한다.
c. "확신“을 포함한다 - 본문안의 증거에 비추어 설득력있어야 함.
d. 해석은 의미심장해야한다.
※질적 연구에서 신뢰도와 타당성에 대한 한계
a. 연구 대상자들이 연구자의 관찰 또는 해석의 정확성을 확증시키지 못할 수도 있다.
b. 제 2평가자가 제 1 평가자의 해석을 확증시키지 못할 경우도 있다.
참고문헌
1. A.루빈 & E.바비(2000), 사회복지조사방법론, 서울:나남출판
2. 김영종, 사회복지조사방법론, 학지사
3. 김종천, 사회복지조사론, 대학출판사
4. 채서일(1992), 사회과학조사방법론(제2판), 서울: 현학사
추천자료
- 사회복지 조사의 과정과 방법(사회복지조사론)
- [사회복지조사론] 이슈화 되고 있는 사회문제에 대한 실태조사를 위한 설문지 - 정규직과 비...
- 국가자격시험 사회복지사 1급 사회복지조사론 특강 자료
- 사회복지조사론-사회과학 방법론과 자연과학 방법론을 비교하여 설명.
- [사회복지조사론] 사회복지전달체계의 통합관리와 대상별 특성에 맞춘 개별관리 중 본인이 더...
- [사회복지조사론] 욕구조사가 사회복지현장(시설, 기관, 정책 등)에서 왜 필요한지 논하시...
- ★ 사회복지조사론 - 신뢰도와 타당도에 대해 설명하고 사회복지조사에 있어 신뢰도와 타당도...
- [사회복지조사론] 최근 사회문제가 되는 사례(아동학대, 청소년 비행, 다문화 가족, 노인...
- [사회복지조사론] 사회복지현장에서 양적 조사가 필요한 상황, 양적 조사를 할 때 유의사항
- [사회복지조사론] 사회복지조사론- 연구문제의 제기
- [사회복지조사론] 사회복지 전달체계와 관련하여 민관협치가 무엇인지, 그것이 이 시점에서 ...
- 사회복지조사론)자신의 지역사회를 대상으로 연구 또는 조사를 한다고 가정한 후 다음과 같은...
- [사회복지조사론] 단일체계설계를 활용한 학교폭력으로 사회봉사명령을 받은 청소년에 대한 ...
- [사회복지조사론]사회복지실천에서 과학적 방법이 필요한 이유에 대해 논하시오
소개글