Transcript 프로그램 기획과 평가
사회복지프로그램 기획 및 평가 -로직모델을 중심으로 김유심(가양4종합사회복지관장) 1.프로그램의 개발과 평가의 개념 2.프로포절의 전개의 9단계 3.로직 모델(logic model)의 개념이해 4.로직 모델의 적용사례 5.프로그램 결과평가 8단계 프로그램 개발과 평가의 개념 사회복지프로그램 =변화를 촉진시키는 매개체 프로그램개발 (Pg development) 프로그램기획과 설계 (planning & design) 프로그램 실행 (implementation) 프로그램 평가 (evaluation) 사회복지 기획노하우 전인적 접근(신체적, 심리적, 사회적, 영적) 시도 클라이언트에 대한 강점관점 전문성향상:새롭고 효과적인 방법 미래지향 : 미래사회에 대한 철학과 통찰 통합/포괄 그리고 다양 프로그램(프로포절) 기획의 9단계 1. 문제를 파악한다. 2. 해결방안을 다각적을 탐색한다. 3. 해결방안을 확정한다. 4. 예상되는 결과와 이점을 기술한다. 5. 해결 방안을 실현시킬 수 있는 과업을 결정한다.(목적, 목표선정) 6. 필요로 되는 자원을 산정한다. 7. 해결 방안의 실행 가능성을 재사정한다. 8. 예상되는 결과와 이점을 재사정해본다. 9. 결과 측정도구를 확정한다. 자료출처:사회복지프로로포절작성법 by Coley and Scheinberg 프로그램의 기획단계 -문제분석 ■ 문제분석⇒ “무엇이 문제인지”를 규정하는 과정 ■ 사회문제 판별 기준(by 최일섭•최성재) √ 사회적 가치/규범 이탈 √ 상당수의 사람들이 그것으로 인해 부정적영향/피해 받음 √ 그 원인은 “사회적” √ 다수 or 영향력 있는 사람들이 “문제”로 판단 √ 사회가 그 문제에 대한 개선을 원함 √ 문제상황 개선위해 집단적/사회적 개입 행동이 요청됨 사회문제 분류 사회해체문제:빈곤, 가족해체, 인종문제… 일탈행위문제:정신장애, 범죄, 약물중독… 구조적 문제: 빈곤, 소득배분, 노동, 교육 해체적 문제: 가족해체, 빈민지역… 탈선적 문제: 범죄, 비행, 자살… 사회변화 및 거대문제: 가족문제, 도시문제, 식량문제 사회적 불평등: 빈곤, 인종차별, 성차별, 정신건강 등 사회적 일탈행위:성적 일탈, 약물중독, 범죄… 사회문제 분석 내용 1. 바람직하지 못한 상황과 조건은 무엇인가? 2. 누가 그 문제로 고통을 받고 있는가 ? 3 .누가 그 문제로부터 이득을 얻는가 ? 4. 누가 그것을 사회문제로 규정하는가? 5. 문제의 원인이 무엇인가? 7. 그 문제를 다루는 현재의 프로그램은 무엇인가? 8. 사회변화의 목표는 무엇인가? 목적과 목표 ■ 목적 및 목표 설정의 중요성 불분명한 목적 & 목표 Program 실행 및 평가 전반에 부정적 결과 사회적 책임성 약화 ■ 목적과 목표 목적과 목표 - 두 용어는 혼용되고 있으나 두가지가 동시에 제시될 때는 구분해야 함 ⊙ 목적(goal) -프로그램의 사명에 대한 의도적인 표현으로 추구하고자 하는 방향 -관념적인 철학적이며 이상적인 요소가 강함 -반드시 측정가능하거나 성취가능할 필요는 없음 -다만 프로그램의 방향을 제시함 ⊙ 목표(objective) -목적을 보다 구체화한 것이며 프로그램이 궁극적으로 달성하고자 하는 지향점을 의미함 -세부목표에 비해 포괄적이고 추상적임 -성과(outcomes)목표로 기술하는 것이 일반적임 목적과 목표 ■ 목표 설정 기준 – 목표 기술시 유의사항 By Robert/mager ① 욕구와 목적과의 관련 ② 명료성 ③ 시간적 기준 ④ 대상의 명확성 ⑤ 성취가능 ⑥ 측정가능 ⑦ 클라이언트에 대한 성과 목표들을 포함 ⑧ 긍정적으로 제시되는 것이 좋음 목적과 목표 ■ 목표 설정 기준 – SMART ① Specific ② Measurable ③ Attainable ④ Result-oriented ⑤ Time frame 왜 로직모델(logic model)인가? 전통적인 서비스 프로그램 모델 투입 ---> 활동 -----> 산출 (inputs) (activities) (outputs) - 전통적인 프로그램 모델의 경우 산출을 중요시함 -수요자 중심이 아닌 공급자 중심의 프로그램 모델 -프로그램에 몇 명의 이용자가 참여했는가? - 프로그램에서 어떠한 서비스를 어느정도 제공했는가? - 하지만 프로그램을 통해 이용자가 어떠한 이익이나 변화가 있었는지 큰 관심을 두지 못함 전통적 방법의 기획과정 우리가 수행하는 활동/프로그램을 생성할 수 있는 시간/돈을 조사한다. 프로그램을 수행하기 위한 시간과 예산을 가장 먼저 고려한다. 프로그램을 수행했을 때 결과는 상황을 변화시킬 것이라고 생각한다. 상황이 변화되면, 더 이상 그 문제가 일어나지 않을 것이라고 생각한다. 새로운 서비스 프로그램 모델 : 로직모델 (Logic Model) 상황 ---> 투입 ---> 활동 (situation) (inputs) (activities) -----> 산출 -----> 성과 (outputs) (outcomes) - 전통적인 프로그램 모델의 경우와 달리 성과를 중요시함 - 공급자 중심이 아닌 수요자 중심의 프로그램 모델 - 프로그램에 참여한 이용자가 어떠한 이익이 있었는지 어떠한 변화가 있 었 는 지 관심을 가짐 - 조직의 입장에서 보면 지역사회의 다양한 이해관계자에게 조직이 지역사회를 위 해 어떻게 기여했는지 명확하게 보여줄 수 있음 - 프로그램의 성과에 대해서 지역사회에 홍보 가능 로직모델(논리모형)의 개념적 이해 비영리 조직에 대한 효율성, 효과성, 책임성 등을 강조하는 사회 환경 변화 로직모델이 프로그램이 갖고 있는 이론 또는 활동에 대한 도표적 표현 -’우리가 어떤 자원을 투입하는가?’ ‘우리가 하는 일은 무엇인가?’ ‘그 결과 또는 성과는 무엇인가?’ ‘If-then 구조’의 논리적 연결관계 프로그램 기획 및 평가의 핵심요소 로직모델이란? 로직모델과정은 프로그램의 효과성을 설명하기 위해 이론가가 아니라 실무자에 의해 20년이상 사용되어져 왔다. 로직모델은 원인과 결과의 관계를 관계를 설명한 것임-원하는 결과를 얻어가는 체계적 접근(systems approach)이다. 로직모델은 문제(상황)을 우리가 가지고 있는 자원투입, 산출이 나오도록 개입하고 성과와 연결시켜간다. 로직모델은 우리가 수행한 업무를 향상시키고 협력할 수 있는 자원을 찾는 것을 돕는다. 로직모델(logic model)의 구성요소 Situation 상황 *프로그램 을 기획해 야 할 이유 로 지역사 회의 문제 나 욕구 Inputs 투입 *프로그램 에 투여되 거나 프로 그램에 의 해 소비된 자원 Activities 활동 *임무를 수 행하기 위 해 프로그 램에서 투 입으로 활 동하는 것 Outputs 산출 Outcomes 성과 (초기) 새로운 지식, *프로그램 활 향상된 기술, 동 중과 활동 태도 및 가 * 프 로 그 램 이후의 클라 치 의 변 화 이언트들이 활동의 직접 얻은 이익이 적인 산물 나 변 화 (중기) (량) 행동의 변화 *문제해결, 욕 (장기) 구충족 조건과 지위 의 변화 Logic model-상황(situation) *프로그램과 비교해서 현재의 상황을 기술하고 baseline을 수립하는 것이다. *문제기술의 전략 1.원인은 무엇인가? 2.문제의 사회적, 경제적, 환경적 증상들은 무엇인가? 3.그 문제에 대해 아무것도 하지 않는다면 어떤 결과가 나타날 것인가? 4.실제적 대가, 비용은 무엇인가? Logic model-상황(situation) 누가 그 문제에 직접적인 영향을 미치고 있는가? 1.누가 영향을 받고 있는가? 2.이 문제와 관련하여 다른 프로젝트나 프로그램에 다루고 있는 것은 무엇인가? Logic model-투입(Inputs) 프로그램을 수행하기위해 우리가 가져와야 하는 것-지식, 기술, 전문성 1.인적자원 2.물적자원 3.시설장비 4.프로그램 수행을 위한 지식 5.지역협력자원-지역사회, 지자체, 정부 Logic model-활동(Activity) •*클라이언트의 문제해결을 위해 제공되는 활동, 논리모델에서 가장 중요 •성취하고자 하는 목적과 목표를 달성하기 위한 최적의 실천방법 개발 •기획의도와 활동 간에 논리적인 연관성이 확보되어야 함 1.프로그램 2.서비스 3.치료개입 Logic model-산출(outputs) 프로그램 클라이언트에게 제공하는 결과물, 상품, 서비스 등을 말한다. 프로그램을 위한 핸드북 제작 교육프로그램 적용한 활동 결과 Logic model-성과(outcomes) 성과에 대한 질문-프로그램의 결과로서 무엇이 일어났는가? 성과가 개인 뿐만 아니라 지역사회 등 다른 변화를 가져올 수 있도록 하는데 유용한가? 성과는 단기, 중기, 장기로 나누어 나타날 수 있다. Logic model-성과(outcomes) 1.단기(short- term) 성과 -클라이언트의 문제에 대한 인식변화 - 클라이언트가 잠재적 문제해결을 위한 능력 인식, 지식, 기술 습득 - 동기부여 2.중기(intermediate-term) 성과 -클라이언트의 실천, 행동변화 -정책반영 –운영전략 획득 3. 장기(long-term) 성과 -소득수준, 재정적 능력 증가 -사회적 조건 감소 예)가정폭력 감소, 협동심 증가 -환경조건 변화 -정치적 조건변화 예)정치적 참여기회 확대 *로직모델을 세워가기 위해 다음의 질문을 해보는 것이 효과적이다. 변화가 필요한 현재의 상황은 무엇인가? 우리가 원하는 상황 또는 성과는 무엇인가? 성취하기 위해서 변화가 필요한 행동은 무엇인가? 행동을 변화하기 전에 필요한 지식, 기술은 무엇인가? 필요한 학습을 하기 위해서 어떤 활동이 필요한가? 바람직한 결과를 성취하기 위해서 필요한 자원은 무엇인가? 로직모델 사례(1) 지역사회내 저소득 방임 아동의 건강한 성장을 위한 야간방과후 프로그램 계획된 수행 Situation Inputs Activities 의도하는 결과 Outputs Outcomes *사회복지사1 *저소득 방 명 *학습지도 임아동의 학 * 방 과 후 지 도 *문화체험 습능력 저하 사1명 *농활캠프 *자원봉사자5 *야간보호 * 저 소 득 명 *아동상담 방 임 아 동 의 *프로그램실2 *보호자 야 간 보 호 5평 상담 *상담실 2평 결여 *차량1대 -주5회 -월1회 -년2회 -주5회 -월2회 -년2회 2시간 4시간 2일 3시간 1시간 2시간 *학습수행능 력 향상 *방임아동 자기효능감 향상 *야간방임 문제 감소 자료출처:사회복지공동모금회 로직모델 사례(2) 사이버 공간을 활용한 세대간 문화격차 해소를 위한 노인 전문자원봉사 프로그램 Situation Inputs *지역사회내 노인의 역할 상실로 노인 경험활용 미 약 *지역신문사 *현수막5개 *지역케이블 방송 *컴퓨터교육 실 *컴퓨터강사 1명 *컴퓨터4대 *촬영기자재 *촬영스튜디 오 *지역사회내 세 대 간 문화단절로 세대간 격차 심각 Activities Outputs *연1회 *봉사자모집 *연16회‘ *봉사자교육 *연10회 *컴퓨터교육 *월1회 *웹진제작 *3개 *동영상제작 *1개 *ucc제작 *5개 *문화체험캠 * 연 1 회 프 (2월) Outcomes *참여노인 의 역량강 화 * 세 대 간 문화격차 해소 *지역사회 내 긍정적인 노 인 상 정립 *참여노 인의 노 후 생 활 의 만족 도 향상 자료출처:사회복지공동모금회 프로그램 결과 평가 8단계 자료출처:사회복지공동모금회 8. 결과평가에서 얻은 증거사용 7. 프로그램평가개 선 6. 자료분석, 결과보고 5. 자료수집, 자료정리 4. 지표를 측정하기 위한 자료수집준비 3. 결과의 효과성 여부를 결정하는 지표선정 2. 측정하고자 하는 프로그램 결과선정 1. 준비단계 프로그램 평가보고서 작성 간단한 요약 (Abstract): 약 250에서 300자 정도 프로그램 평가결과를 간단하게 나열 ( Executive summary) 1. 서론 A. 문제 서술 (Description of the problem) B. 평가 리서치를 위한 질문 (Evaluative questions) C. 평가목적; 평가이유 (Purpose of the evaluation and rationale for it) 2.문헌 조사 (Literature review) A. 문제에 대한 이론적, 역사적 고찰 (theoretical and historical review of the problem) B. 리서치와 프로그램 평가에서 이미 확인된 사실에 대한 고찰 (Review of evidences found in research and program evaluation) 프로그램 평가보고서 작성 3. 평가방법 (Evaluation methods) A. 평가를 위한 로직모델 개발 (Development of a logic model to prepare for evaluation) B. 평가 디자인 (Evaluation design) a. 평가 대상자들에 대한 설명 (Description of target population) b. 프로그램 서술 (Description of the program) c. 프로그램 디자인에 대한 설명 (Description of the program design) d. 표본착출 방법 (Sampling method) e. 자료수집 방법 (Data collection method) f. 측정도구 (Measurement scale) g. 평가목적 (Evaluation outcomes), 평가 목적 (Evaluation objectives), 평가척도 (Evaluation criteria) C. 자료수집 (Data collection) D. 자료분석 (Data analysis) 4. 결과보고 (Evaluation results) 5. 추천/제안 (Recommendations/Suggestions) 장벽에는 다 이유가 있다. 장벽은 우리가 무엇을 얼마나 절실하게 원하는지 깨달을 수 있도록 기회를 제공하는 것이다. -랜디 포시의 ‘마지막 강의’ 중에서 사람사랑의 복지미래를 함께 열어갑시다!!! 감사합니다.