본문내용
평가는 반복해서 이뤄져야 한다.
여러 연구의 축적된 정보는 프로그램의 개선을 위한 구체적인 정보를 더 많이 제고해 줌
③ 평가자는 평가의 정치적 특성을 이해해야 한다.
정책형성과 그 과정에 포함된 여러 정치력 간의 상호작용이며 프로그램 규모가 커질수록
정치적 성향이 짙어짐.
3. 프로그램 평가의 구성요소
(1) 투입
- 프로그램 목표를 달성하기 위해 요구되는 여러 자원
- 조력전문직의 투입은 수혜자, 상담자, 예산, 시설, 장비 등이 포함
(2) 전환
- 서비스를 전달하는 활동과정
- 서비스의 정의, 과업, 개입방법, 전략, 치료 및 개입 유형, 치료 및 개입방법 등이 포함됨.
(3) 산출
- 프로그램 적용을 통해서 기대하는 결과를 얻기 위한 서비스양
- 상담건수, 서비스 참여자 수, 취업 인원, 서비스 제공시간, 서비스 수혜 인원 수, 제공된
교육자료 등 모든 활동의 양적 실적을 포함.
(4) 성과
- 서비스 수혜자가 프로그램을 통해 삶의 질 측면에서 이룬 측정 가능한 변화
- 프로그램 실시 후 수혜자가 얻은 이익, 변화 혹은 효과를 의미
① 초기 성과
수혜자의 지식, 태도, 기술의 변화를 포함.
프로그램의 목표 달성을 확인할 때 필요하며 진행이 잘 이루어지고 밝히는 중요한 지표
② 중간 성과
초기 성과와 최종 성과를 연계
수혜자의 지식, 태도, 기술, 변화에 따른 행동 변화를 의미
③ 최종 성과
수혜자에게 궁극적으로 기대되는 변화로서 환경과 지위 등의 변화를 포함
4. 프로그램 평가의 원리 및 모형
1) 평가원리
- 평가의 주요 원칙 (수혜자에 초점을 맞춘 원리에서 비롯)
① 이용자의 욕구에 대한 평가와 제공된 서비스에 대한 평가를 반복적으로 실시
② 성과 측정, 평가 대상, 평가기간, 평가 정보의 활용을 포함한 시스템을 갖춤.
③ 수혜자의 욕구에 대한 조사는 정기적으로 전문적이고 행정적인 방식으로 이뤄짐.
④ 프로그램 평가 결과의 활용은 서비스 수혜자와 제공자 그리고 지원체계 적절히 전달
2) 평가모형
분류
모형
주요 내용 및 특징
고전적
평가모형
실험평가모형
· 실험연구 방법 활용
· 프로그램의 인과적 효과성 평가
· 프로그램 효과 평가과정의 내적 타당도 중요
목표중심 평가모형
· 교육평가 방법 활용
· 학습자의 교육목표 성취여부평가
· 진술된 교육목표와 성취 수행 결과 간 비교에 초점
인증평가모형
· 전문가 준거 활용
· 전문가 집단의 기관방문 평가
· 프로그램 및 기관과 준거 간 비교에 초점
대안적
평가모형
의사결정중심 평가모형
· 프로그램 개선을 위한 평가자 정보 활용
· 의사결정자를 위해 평가
· 의사결정 항목에 대한 평가자의 가치가 배제된 평가
정보 제공에 초점
반론중심 평가모형
· 사법적 심리절차 활용
· 합리적 의사결정을 위한 심의 형태 평가
· 찬성 및 반대 입장 간의 비교를 통해 프로그램의 장단점
파악에 초점
전문성중심 평가모형
· 전문가 권위 및 식견 활용
· 전문가의 비평적 태도 또는 심의체계를 통한 평가
· 전문가의 프로그램 장점 및 가치에 대한 견해에 초점
이용자중심 평가모형
· 이용자 또는 수혜자의 인식 활용
· 이용자의 자연스러운 참여와 반응에 의한 평가
· 이용자 개개인의 다양한 욕구 및 가치에 초점
반응중심 평가모형
· 프로그램 관련자의 다양한 요구와 가치 활용
· 프로그램 관련자의 평가 참여와 이를 통한 자연스러운
반응에 따른 평가
· 평가방식 안내 및 프로그램 활동에 관련된 다양한
관심, 문제, 결과의 포괄적 정보 제공에 초점
- 평가목적에 따른 평가모형 분류
5. 프로그램 평가의 절차
1) 프로그램 평가의 과정
(1) 평가준비 단계
- 문제인식을 형성하며 무엇을 어떻게 시작해야 하는지를 확인하는 단계
- 프로그램 평가 근거 점검표에 노력성, 효과성, 효율성이 포함됨.
① 노력성
프로그램의 규모 및 확장성, 목표 달성에 활용 가능한 자원, 서비스 제공기관 및 제공
자의 성장과 전문성 발휘포함.
② 효과성
프로그램의 효과성, 수혜자 만족도, 수혜자 욕구 충족, 지역사회 여론 형성 효과성 포함
③ 효율성
프로그램 수행비용, 예산 결정 근거의 타당성, 소요 비용의 상대적 효율성 평가 포함.
(2) 평가목적 확인 및 진술 단계
- 평가를 실시하는 이유 또는 목적을 구체적으로 기술하고 평가 내용 및 하위 요소를 결정
(3) 평가설계 단계 (연구 실험설계)
- 필요한 자료를 효과적으로 정확하게 수집, 분석, 비교할 수 있는 절차를 세움.
- 실험설계에는 진실험설계와 준실험설계, 모의실험설계, 단일사례설계가 있음.
- 프로그램 평가설계 방법의 특성 비교설계방법
진실험설계
준실험설계
모의실험설계
단일사례설계
독립변수 조작
사전-사후 측정
ABAB설계 시
실험 및 통제 집단 구성
기초선 이용
무선배정
Χ
Χ
해당없음
외적 타당도
대체로 높음
낮음
매우 낮음
낮음
내적 타당도
높음
대체로 높음
매우 낮음
대체로 높음
(4) 평가실시 단계
- 측정도구를 선정하고 자료를 수집
- 측정도구는 널리 활용되는 것을 사용하거나 필요에 다라 기존 도구를 수정 제작 또는
새롭게 제작하는 과정을 밟게 됨.
- 평가 정보 수집방법
구분
평가 정보 수집방법
프로그램 기록 검토
자기보고식 평가
면접
관찰
비용
낮음
적절
비교적 높은 편
비교적 높은 편
자료수집을 위한 훈련 요구량
적음
없거나 적음
비교적 많음
비교적 많음
소요시간
기록량에
따라 달라짐
비교적 적음
문항 수에
따라 달라짐
많음
관찰내용에 따라 달아짐
비교적 적음
반응률
기록 질에
따라 달라짐
비교적 높음
배포량과
문항 내용에 따라 달라짐
높음
높음
측정방법
양적 평가.
질적평가가 상대적으로 어려움
양적평가.
내용에 따라 질적평가 가능
질적평가.
조작적 정의를 통해 양적 평가 가능
질적평가.
조작적 정의를 통해 양적평가 가능
(5) 평가결과 분석 단계
- 수집된 자료를이해하기 쉽게 정리 및 요약
(6) 평가결과 보고서 작성 단계
- 평가 결과를 분석한 것을 정리 및 요약하여 보고서 형식을 갖춰서 작성
(7) 평가결과 활용 단계
- 평가를 통해서 얻어진 정보를 프로그램 관계자, 즉 실시자, 수혜자, 지원자 등에게 전달하고
프로그램과 관련된 의사결정 등에 활용
여러 연구의 축적된 정보는 프로그램의 개선을 위한 구체적인 정보를 더 많이 제고해 줌
③ 평가자는 평가의 정치적 특성을 이해해야 한다.
정책형성과 그 과정에 포함된 여러 정치력 간의 상호작용이며 프로그램 규모가 커질수록
정치적 성향이 짙어짐.
3. 프로그램 평가의 구성요소
(1) 투입
- 프로그램 목표를 달성하기 위해 요구되는 여러 자원
- 조력전문직의 투입은 수혜자, 상담자, 예산, 시설, 장비 등이 포함
(2) 전환
- 서비스를 전달하는 활동과정
- 서비스의 정의, 과업, 개입방법, 전략, 치료 및 개입 유형, 치료 및 개입방법 등이 포함됨.
(3) 산출
- 프로그램 적용을 통해서 기대하는 결과를 얻기 위한 서비스양
- 상담건수, 서비스 참여자 수, 취업 인원, 서비스 제공시간, 서비스 수혜 인원 수, 제공된
교육자료 등 모든 활동의 양적 실적을 포함.
(4) 성과
- 서비스 수혜자가 프로그램을 통해 삶의 질 측면에서 이룬 측정 가능한 변화
- 프로그램 실시 후 수혜자가 얻은 이익, 변화 혹은 효과를 의미
① 초기 성과
수혜자의 지식, 태도, 기술의 변화를 포함.
프로그램의 목표 달성을 확인할 때 필요하며 진행이 잘 이루어지고 밝히는 중요한 지표
② 중간 성과
초기 성과와 최종 성과를 연계
수혜자의 지식, 태도, 기술, 변화에 따른 행동 변화를 의미
③ 최종 성과
수혜자에게 궁극적으로 기대되는 변화로서 환경과 지위 등의 변화를 포함
4. 프로그램 평가의 원리 및 모형
1) 평가원리
- 평가의 주요 원칙 (수혜자에 초점을 맞춘 원리에서 비롯)
① 이용자의 욕구에 대한 평가와 제공된 서비스에 대한 평가를 반복적으로 실시
② 성과 측정, 평가 대상, 평가기간, 평가 정보의 활용을 포함한 시스템을 갖춤.
③ 수혜자의 욕구에 대한 조사는 정기적으로 전문적이고 행정적인 방식으로 이뤄짐.
④ 프로그램 평가 결과의 활용은 서비스 수혜자와 제공자 그리고 지원체계 적절히 전달
2) 평가모형
분류
모형
주요 내용 및 특징
고전적
평가모형
실험평가모형
· 실험연구 방법 활용
· 프로그램의 인과적 효과성 평가
· 프로그램 효과 평가과정의 내적 타당도 중요
목표중심 평가모형
· 교육평가 방법 활용
· 학습자의 교육목표 성취여부평가
· 진술된 교육목표와 성취 수행 결과 간 비교에 초점
인증평가모형
· 전문가 준거 활용
· 전문가 집단의 기관방문 평가
· 프로그램 및 기관과 준거 간 비교에 초점
대안적
평가모형
의사결정중심 평가모형
· 프로그램 개선을 위한 평가자 정보 활용
· 의사결정자를 위해 평가
· 의사결정 항목에 대한 평가자의 가치가 배제된 평가
정보 제공에 초점
반론중심 평가모형
· 사법적 심리절차 활용
· 합리적 의사결정을 위한 심의 형태 평가
· 찬성 및 반대 입장 간의 비교를 통해 프로그램의 장단점
파악에 초점
전문성중심 평가모형
· 전문가 권위 및 식견 활용
· 전문가의 비평적 태도 또는 심의체계를 통한 평가
· 전문가의 프로그램 장점 및 가치에 대한 견해에 초점
이용자중심 평가모형
· 이용자 또는 수혜자의 인식 활용
· 이용자의 자연스러운 참여와 반응에 의한 평가
· 이용자 개개인의 다양한 욕구 및 가치에 초점
반응중심 평가모형
· 프로그램 관련자의 다양한 요구와 가치 활용
· 프로그램 관련자의 평가 참여와 이를 통한 자연스러운
반응에 따른 평가
· 평가방식 안내 및 프로그램 활동에 관련된 다양한
관심, 문제, 결과의 포괄적 정보 제공에 초점
- 평가목적에 따른 평가모형 분류
5. 프로그램 평가의 절차
1) 프로그램 평가의 과정
(1) 평가준비 단계
- 문제인식을 형성하며 무엇을 어떻게 시작해야 하는지를 확인하는 단계
- 프로그램 평가 근거 점검표에 노력성, 효과성, 효율성이 포함됨.
① 노력성
프로그램의 규모 및 확장성, 목표 달성에 활용 가능한 자원, 서비스 제공기관 및 제공
자의 성장과 전문성 발휘포함.
② 효과성
프로그램의 효과성, 수혜자 만족도, 수혜자 욕구 충족, 지역사회 여론 형성 효과성 포함
③ 효율성
프로그램 수행비용, 예산 결정 근거의 타당성, 소요 비용의 상대적 효율성 평가 포함.
(2) 평가목적 확인 및 진술 단계
- 평가를 실시하는 이유 또는 목적을 구체적으로 기술하고 평가 내용 및 하위 요소를 결정
(3) 평가설계 단계 (연구 실험설계)
- 필요한 자료를 효과적으로 정확하게 수집, 분석, 비교할 수 있는 절차를 세움.
- 실험설계에는 진실험설계와 준실험설계, 모의실험설계, 단일사례설계가 있음.
- 프로그램 평가설계 방법의 특성 비교설계방법
진실험설계
준실험설계
모의실험설계
단일사례설계
독립변수 조작
사전-사후 측정
ABAB설계 시
실험 및 통제 집단 구성
기초선 이용
무선배정
Χ
Χ
해당없음
외적 타당도
대체로 높음
낮음
매우 낮음
낮음
내적 타당도
높음
대체로 높음
매우 낮음
대체로 높음
(4) 평가실시 단계
- 측정도구를 선정하고 자료를 수집
- 측정도구는 널리 활용되는 것을 사용하거나 필요에 다라 기존 도구를 수정 제작 또는
새롭게 제작하는 과정을 밟게 됨.
- 평가 정보 수집방법
구분
평가 정보 수집방법
프로그램 기록 검토
자기보고식 평가
면접
관찰
비용
낮음
적절
비교적 높은 편
비교적 높은 편
자료수집을 위한 훈련 요구량
적음
없거나 적음
비교적 많음
비교적 많음
소요시간
기록량에
따라 달라짐
비교적 적음
문항 수에
따라 달라짐
많음
관찰내용에 따라 달아짐
비교적 적음
반응률
기록 질에
따라 달라짐
비교적 높음
배포량과
문항 내용에 따라 달라짐
높음
높음
측정방법
양적 평가.
질적평가가 상대적으로 어려움
양적평가.
내용에 따라 질적평가 가능
질적평가.
조작적 정의를 통해 양적 평가 가능
질적평가.
조작적 정의를 통해 양적평가 가능
(5) 평가결과 분석 단계
- 수집된 자료를이해하기 쉽게 정리 및 요약
(6) 평가결과 보고서 작성 단계
- 평가 결과를 분석한 것을 정리 및 요약하여 보고서 형식을 갖춰서 작성
(7) 평가결과 활용 단계
- 평가를 통해서 얻어진 정보를 프로그램 관계자, 즉 실시자, 수혜자, 지원자 등에게 전달하고
프로그램과 관련된 의사결정 등에 활용
추천자료
- 2012년 2학기 영유아프로그램개발과평가 기말시험 핵심체크
- 2012년 2학기 청소년프로그램개발및평가 기말시험 핵심체크
- 2013년 2학기 영유아프로그램개발과평가 기말시험 핵심체크
- 2013년 2학기 청소년프로그램개발및평가 기말시험 핵심체크
- 2015년 2학기 청소년프로그램개발및평가 기말시험 핵심체크
- 2016년 2학기 영유아프로그램개발과평가 기말시험 핵심체크
- 2016년 2학기 청소년프로그램개발및평가 기말시험 핵심체크
- 2016년 2학기 영유아프로그램개발과평가 교재 전 범위 핵심요약노트
- 2016년 2학기 청소년프로그램개발및평가 교재 전 범위 핵심요약노트
- 2017년 2학기 영유아프로그램개발과평가 중간시험과제물 C형(프로젝트 접근법)
- 2017년 2학기 영유아프로그램개발과평가 교재 전 범위 핵심요약노트
- 2017년 2학기 청소년프로그램개발및평가 교재 전 범위 핵심요약노트
- 2018년 1학기 프로그램개발과평가 기말시험 핵심체크
- 2018년 1학기 프로그램개발과평가 멀티미디어 강의 전 범위 핵심요약노트
소개글