Transcript a3강 - 사회복지통계연구소

사회복지조사론
Research Method for Social Welfare
이 수 천 / 사회복지통계연구소
(서울기독대학교 M.A., Ph.D.)
3강 실험설계조사와 비실험설계조사
인과관계와 가설
실험설계의 종류
비실험설계의 종류
인과관계의 3가지 조건
① 선후성 cause & effect : 원인은 항상 결과보다 앞선다.
“자원봉사활동에 참여하면 높은 이타적 성향이 나타난다.”???
② 상관성 association : 서로 간의 연관성이 명확하게 인정되어야 한
다.
“물리치료 효과가 좋으면 물리치료실을 계속 이용할 것이다.”
③ 비허위성 nonspuriousness : 제3의 변수에 의하여 인과관계가 유
효한 영향을 받지 않아야 한다. 즉, 원인과 결과의 불변적 결합을
이루어야 한다.
“경제수준이 높으면 물리치료실 이용만족도가 증가할 것이다.”???
변수의 인과관계
매개
변수
독립
변수
종속
변수
① 독립변수 : 어떤 변수에 영향을 주거나 설명해 주는 변수로 변수 자
체로서는 독립적인 성을 갖는다. 인과관계에서 원인이 되는 변수이
다. 따라서 인과관계의 3가지 조건을 모두 반영되도록 구성되어야
한다.
② 종속변수 : 다른 변수의 영향을 받는 변수로, 인과관계의 결과에 해
당하는 변수이다. 최종적인 결과 혹은 결과적 현상을 의미하므로 연
구의 주된 관심이 된다. 역시 인과관계의 3가지 조건을 모두 반영되
도록 구성되어야 한다.
③ 매개변수 : 독립변수와 마찬가지로 종속변수에 영향을 주지만 시간
적(순서적)으로 보아 독립변수와 종속변수 사이에 존재한다. 독립변
수에 의하여 영향을 받으면서 종속변수에 영향을 주게 된다. 매개변
수는 독립변수와 종속변수와의 관계를 보다 자세하게 설명해 주는
기능도 있다.
가설 만들기
● 가설이란 아직 경험적으로 검증되지 아니한 일종의 예비적 이론으
로, 둘 혹은 그 이상의 변인들간의 관계에 대한 추측적 진술을 의미
한다.
● 변수간의 관계성에 대한 것이 많기 때문에 상당수 가설들은 인과관
계의 성격을 가진다.
● 단순히 상관관계를 구하기 원하는 가설의 경우 인과관계처럼 어려
운 충족요건을 지킬 필요는 없다.
● 가설은 연구문제의 미리 정해둔 해답으로 변수와 변수간의 관계에
대하여 간단·명료·뚜렷하게 규정해 놓게 된다.
● if...then...구조를 취하게 되는 경우가 많기 때문에 연역적 연구방법
을 적용한 것이라 볼 수 있다.
2
● 너무 쉬운 가설은 의미가 없는 경우가 많으므로 가설 자체가 가지는
유용도를 주의 깊게 살피고 세워야 한다.
● 가설의 한계는,
그것은 이론이 아니며 진리는 더더욱 아니라는 점이다.
● 가설을 규정하는 데 있어 주의할 점
① 가설의 타당성
② 인과관계와 상관관계
③ 타 변수들과의 관계
④ 측정
⑤ 검증방법과 가능성
⑥ 일반화의 가능성
1
실험설계와 비실험설계
● 실험설계독립변수의 조작과 통제 그리고 비교의 방법을 통하여 서비스의 개
입효과를 실험과정과 같은 유형으로 분석하는 방법이다.
● 비실험설계실험설계를 적용할 수 없는 사회현상의 분석이나 설명적 조사에 활
용하기 위하여 개발된 방법이다.
실험설계의 종류
(1) 실험조사설계
Experimental Design or A Pretest/Posttest Control-Group Design
° 전통적인 실험실의 설계방식을 그대로 차용한 설계방식. 기본형
° ‘연구자의 의도성-대상자의 선택 편의’를 줄이기 위하여 난선화
(random)로 실험집단과 통제집단을 구분(확률적 배분)
° 실험집단, 통제집단 모두 사전검사
° 실험집단에 프로그램 개입
° 실험집단, 통제집단 모두 사후검사
° 실험집단과 통제집단의 사전-사후 변화 비교를 통한 가설검증
° 주요개념 : 조작, 통제, 비교
(2) 준실험조사설계(유사실험조사설계, 의사실험조사설계)
Quasi-Experimental Design
① 비동일통제집단비교설계
The Nonequivalent Control Group Design
° 실험설계와 유형과 검증방법이 동일하나 실험집단과 통제집단을
임의로 배치
° 무작위 배치가 윤리적·현실적으로 어려울 때 적용할 수 있기 때문
에 유용성 매우 높음
° 실험집단과 통제집단을 최대한 유사하게 배치(사전 검사로 확인)
° 실제로 사회복지분야의 집단설계에서 많이 사용
② 시계열설계 Time Series Design
° 단순 시계열 설계로 개입 이전에 3회 이상의 연속적 관찰로 성향을
파악
° 개입 후 변화된 성향을 분석
° 즉, 반복관찰을 통한 조작과 변화의 관계를 확인
° 예기치 않은 사건에 의하여 영향 받을 수 있어 타당성의 문제에 있
어 취약
(3) 전실험조사설계(원시실험설계)
Pre Experimental Design
° 다소 원시적인 실험설계임
° 실험집단, 통제집단, 사전검증, 사후검증 중 하나 이상 부족하거나
없는 형태로 설계
① 정적 집단비교(두집단 후비교설계) Static-Group Comparison :
실험집단과 비실험집단이 준실험설계와 비슷하게 설정된다. 사전
검사는 없이 사후검사로만 비교한다.
② 단일집단 전후비교설계 The One-Group Pre-test Post-test
Design : 통제집단이 없이 오직 실험집단으로만 구성한다. 통제
집단이 없기 때문에 외적타당도에 대해 심각한 약점을 갖게 된다.
③ 1회 후검사 사례연구 The One-Shot Case Study : 탐색적 조사
에 많이 사용된다. 비교할 통제집단도 없고, 사전검사도 없으며,
단지 실험집단에 대한 사후검사만으로 효과성을 검증한다. 내적,
외적타당도 모두 심각하게 취약하다.
(4) 단일사례연구
Single-Case Evaluation Design
° 행동수정을 비롯한 사회복지 임상분야에서 많이 사용되는 효과측정
방법
° 하나의 사례(한 사례의 소수 문제/소수사례)에 대한 사회복지적 개
입을 실시한 후 변화가 발생하는지 그렇지 않은지에 대해 관찰을 통
해 기록, 평가하는 방식
° 통제사례를 만들기 어려울 때 사용→일반화도 어렵다
° 대상자의 정서적 문제와 같이 측정이 어려운 질적영역에 대한 개입
의 경우 관찰의 객관성 확보에 어려움을 가짐 → 행동수정과 같은
영역이 상대적으로 더 적합함
° 개입의 효과성을 증명하기 위하여 시계열 측정방식을 도입함
① AB설계와 ABAB설계
° 기초선(A) : 사전검사에 해당. 통상 2-5일 관찰. 통상 2인 이상 관찰
자. 문제행동의 빈도관찰
° 개입(B) : 문제행동 감소를 위한 프로그램 실시. 관찰하여 문제행동
의 빈도의 감소를 봄
° 2차 기초선(A) : 프로그램을 중단하고 관찰
° 2차 개입(B) : 프로그램을 재차 실시. 문제행동 감소 관찰
° 대상자의 문제해결을 증명하기 위하여 개입했다가 그냥 놔뒀다가
다시 개입했다는 윤리적 문제가 대두될 수 있음
② ABB'B''설계 - 다중기초선설계 Multiple-Baseline Design
° 기초선(A)과 개입(B)은 한 번씩만 이루어짐
° 개입의 시기를 각각 달리함
(5) 기타 실험설계
° 솔로몬 4집단 실험설계 Solomon Four Group Design -사전사후검
사의 관계성 배제
° 다집단 실험설계 Multiple Group Experimental Design - 효과의
차이 검증
내·외적 타당도의 문제
● 내적타당도 : 개념적, 이론적으로 전개된 논리적 인과관계가 과연 타
당한가에 대한 문제
● 즉, 변화가 일어났다면 과연 종속변화의 변화가 독립변수에 의한 것
인지, 다른 조건에 의한 것인지를 판단하는 것이다. → 통제집단 구
성으로 문제해결을 한다.
● 내적타당도를 위협하는 8요인(쿡과 킴벨: 1979 루빈과 바비, 2004)
① 우연한 사건 :
통제되지 않는 우연한 사건이 발생하여 결과에 영향을 줄 수 있다.
② 성숙 또는 시간의 경과 :
시간의 흐름과 성숙은 언제든지 발생할 수 있다.
③ 검사 :
프로그램 없이 검사만으로도 변화가 있을 수 있다.
2
④ 도구화 : 연구자가 바뀌거나 서로 다른 측정도구가 사용되었을 경우
발생할 수 있는 문제이다.
⑤ 통계적 회귀 : 초기 극단값을 가지고 있던 실험대상자는 실험과 상
관없이 시간이 지나면 변화될 수 있으며, 이를 효과로 착각하게 된
다.
⑥ 선택편견 : 통제집단을 잘못 선택하거나 의도적으로 선택하면 실험
결과가 왜곡될 수 있다.
⑦ 실험대상의 탈락 : 실험 중 거부, 이상, 사망 등으로 실험에서 제외되
는 경우 남은 이들만으로 평가하는 데, 이는 긍정적인 평가가 될 가
능성이 높다.
⑧ 확산 또는 모방 : 통제집단이 실험집단의 긍정적 변화를 보고 따라
하는 경우가 있다.
1
● 외적타당도 : 일반화가 가능한가에 대한 문제
● 일을 해결하기 위해 난선화(random)를 한다. 그러나 이 경우 역시
집단 안에서의 일반화일 뿐이다. 따라서 실험설계와 같은 실험이 계
속해서 반복되어 실험이 효과가 있다는 것을 증명되지 않으면 실험
설계의 일반화 즉, 외적타당도는 확인하기 어렵다.
● 외적타당도와 관련된 문제들
① 표본의 문제 : 대표성 있는 표본이 이루어졌는가? → 난선화
② 측정도구의 문제 : 모든 상황에 동일하게 측정할 수 있는 측정도
구가 만들어져야 한다.
③ 조작과정의 문제 : 실험실의 환경이 동일하게 유지될 수 있는가?
4강 비실험설계조사
인과관계 설계법
이론기반형 설계법
마인드맵형 설계법 및 질적조사설계
비실험설계
•
비실험설계는 통제집단의 설정이나 조작 등의 과정을 중요시
하기 보다는 실험설계를 적용할 수 없는 사회현상의 분석이나
설명적 조사에 활용하기 위한 방법이다.
• 욕구조사, 탐색적·기술적 조사의 경우 실험설계가 아닌 일반
적인 조사설계 방식이 적용되어 계획되어진다.
• 다양한 설계방법이 있으나 대표적으로
인과관계 설계법,
이론기반형 설계법,
마인드맵형 설계법이 있다.
인과관계 설계법
• 인과관계 설계법은 인과관계의 의한 가설을 규정하는 방법을 응용
하는 설계방법이다.
• 인과관계의 3특성(시간성, 상관성, 비허위성)을 활용하여 측정도
구의 내용을 설계한다.
• 어떠한 원인과 과정을 통하여 결과가 산출되는가를 연역적 방법에
의존하여 구성한다.
• 한계 및 단점
 연역법이 갖는 한계가 인과관계의 한계이다.
즉, 인과관계의 구성이 직관이나 기존 가설논리에 의존하는 경
우가 많다.
직관에 의존할 경우 주관적 오류를 해결할 수 있는 이론적 토대
나 문헌연구가 뒷받침되어야 하며,
기존 가설을 의존한 경우라도 그 가설이 타당한지에 대한 검토
가 선행되어야 한다.
 너무 단순화 시킬 가능성이 크다.
즉, 다양한 독립변수나 매개변수를 충분히 고려하지 못하고 연
구하는 경우가 많다.
또한 핵심 되는 요소로 압축하다 보니 연구영역이 제한되기도
한다.
• 사례를 통한 인과관계 설계법 이해
복지관 물리치료실을 이용하는 어르신들을 대상으로 만족도를 조사
하여 만족도에 영향을 미치는 요인과 문제점을 찾아내어 보다 효과적
인 프로그램을 개선하고자 한다.
① 독립변수와 종속변수를 구성한다.
° 결과로 제시된 부분이 어르신의 이용만족도이다. 이것이 종속변
수이다.
° 어떤 프로그램이든 이용만족도 구성에서 클라이언트의 참여도는
중요한 요인이다. 적극적인 클라이언트는 그렇지 않은 클라이언
트보다 만족도가 높은 것이 일반적이기 때문이다. 따라서 참여도
를 만족도의 원인으로(독립변수로) 추정할 수 있다.
② 매개변수를 구성한다.
° 물리치료실 이용만족도에 영향을 주는 다른 요인도 생각해야 한다.
° 품질관점에 입각하면 프로그램자체, 프로그램 진행자, 물리치료실
의 환경은 이용만족도에 영향을 줄 수 있다.
° 또한 이것들은 참여정도에 의하여 영향을 받는다.
° 이것들은 원인에 의하여 영향을 받으면서 결과에 영향을 미치는 요
인들이기 때문에 매개변수의 역할을 수행한다.
이론기반형 설계법
• 기존에 제안된 이론을 토대로 하여 설문조사 할 내용을 구성하는 설
계방법이다.
• 조작적 정의에 근접한 수준까지 설계되면 조사의 내용적 근거들이
기존 이론에 의하여 설명되므로 타당도가 높아진다.
→ 이론과 조사설계가 일치된 경우 구성타당도의 인증에서 유리하
지만,
그렇지 않을 경우 이론적 취약성을 드러낼 수밖에 없다.
• 전형적인 연역적 연구방법이지만 인과관계가 아닌 기술적 조사나
탐색적 조사에서도 적용할 수 있는 장점이 있다.
• 기반한 이론의 틀거리를 체계적으로 분류하고 배치하는 작업이 선
행되어야 한다.
• 단점
 이론을 구체화하는 작업이 쉽지 않다.
 연구자는 이론을 충분하게 숙지하고 있음을 물론 이론을 구조
화할 수 있는 능력까지 겸비해야 하는데,
이 과정은 많은 훈련이 필요하다.
 모든 이론이 연구자가 의도하는 조사설계에 적합하게 준비되
어 있지는 않다. 이론 중에서도 조사연구에 합당한 이론을 찾
아내지 못하거나 이론의 구성이 너무 어려워 구체화하는 것이
불가능한 경우 적응하기가 어렵다.
이론기반형 설계 이해-욕구조사
•
학자들마다 욕구를 보는 관점이 다르다.
 Maslow : 생리적 욕구, 안전의 욕구, 소속과 애정의 욕구, 자아존
중의 욕구, 자아실현의 욕구
 성규탁 : 적절한 소득과 경제적 기회(고용, 소득, 자본), 기본적인 물질적
욕구를 충족하는 데 필요한 조건(음식, 의복, 주택, 교통, 안전), 적절한 보
건(공중보건, 의료, 정신적 건강, 재활), 적절한 지식과 기능(교육, 특수교
육, 도서관), 적절한 개인적, 사회적 적응과 개발(가족상담, 아동보호, 위기
개입, 휴양, 집단복지활동, 문화와 종교활동), 적절한 사회조직체를 통한
활동(지역사회와 정치적 조직, 커뮤니케이션, 조사연구)
 Bradshaw : 사회적 욕구를 규범적 욕구, 인지된 욕구, 표현적 욕
구, 비교적 욕구로 제안
 Alderfer : 욕구충족의 정도와 강도에 따라 욕구좌절, 욕구강도,
욕구만족 제안
• 이론의 활용
°
°
°
°
Maslow의 이론은 욕구의 흐름을 보는 데 장점이 있다.
성규탁의 이론은 보다 현실적으로 보는 데 장점이 있다.
Bradshaw의 이론은 욕구를 바라보는 관점을 제공한다.
Alderfer의 이론은 정도를 묻는 데 관점을 제시한다.
 이러한 이론을 종합적으로 고려하여 욕구조사를 설계할 수 있다.
마인드맵을 이용한 지역조사
• 자유연상법을 이용하는 마인드맵은 인과관계의 설정이나 복잡한 논
리구조를 가지지 않는 실태조사, 탐색적 조사, 간단한 기초조사의 설
문지 틀을 구성하는 데 적합한 방법이다.
• 자유연상법은 연구자의 직관에 의존하기 때문에 타당성/논리성에서
는 취약할 수 있다.
• 질적연구나 자유로운 연구의 가능성을 높여줄 수 있으며,
귀납적 연구방법으로 활용 가능하다.
• 첫 근거들의 제시와 관계망 추정은 직관에 의존한다. 고로
 어떠한 직관을 사용하느냐?
 얼마나 효과적이고, 타당할 만한 내용의 직관능력이 작용할 수
있는가?
 연구자의 직관을 키우기 위한 많은 훈련과 노력이 필요하다.
• 마인드맵의 과정
① 문제나 정보의 중심어나 중심 이미지는 용지의 중앙에 오게 한다:
연구주제의 중심어(주제)
② 생각은 판단에 얽매이지 않고 자유롭게 흐르게 한다. 중심어를 생각
할 때 자유롭게 연상되는 다양한 용어들, 또는 설문조사의 구체적인
목표들을 자유롭게 생각해 본다. 이때 명상이 도움이 되기도 한다.
③ 핵심어로 생각을 표현한다. 핵심어는 명사나 동사여야 한다.
④ 핵심어는 선으로 중앙의 중심어와 연결을 한다.
⑤ 하위핵심어들은 핵심어와 선으로 연결한다. 핵심어들은 하위중심이다.
⑥ 이미지나 상징적 기호를 사용하여 생각을 강조하고 두뇌가 다른 연
결을 만들어 내도록 자극한다.
⑦ 하나의 핵심어 과정이 마쳐지면 다른 핵심어를 기준으로 해 하위 핵
심어들을 다시 선으로 연결한다.
⑧ 전체적으로 주제어와 핵심어들 간의 선으로 연결된 관계가 완성되
면, 중복되는 것은 삭제하고, 전체적인 조명을 통하여 부족한 영역들
을 다시 첨가한다. 이 과정이 반복되고 난 후 새로운 종이에 최종결
과를 깨끗하게 옮겨 정리해 놓는다.
• 복지관에서 지역사회 주민들의 욕구조사와 문제해결을 위한 주민동
원의 가능성을 타진하기 위하여 지역조사를 한다고 가정할 때, 이를
위한 설문지를 마인드맵을 이용하여 구성하는 실습을 해 보자.
① 중심어 : 지역사회욕구조사
② 핵심어 : 지역주민의 특성, 지역사회평가, 기관사업에 대한 이해,
지역사회참여의식 등
③ 하위핵심어 : 지역주민특성의 하위핵심어는...거주기간, 가족구성,
수입, 주거형태, 성별, 연령, 학력, 혼인여부
④ 색상, 음악, 이미지를 덧입힌다.
⑤ 또 다른 하위핵심어로 옮긴다.(③,④번 반복)
⑥ 전체적으로 정리한다 : 삭제, 이동 등
질적조사설계
• 양적조사 : 설문지, 통계적 수치를 활용한 조사
• 질적조사 : 인터뷰, 참여관찰 등을 통해 의미를 파악하는 조사
• 질적조사의 설계는 어떤 면에서 양적조사 설계보다는 더 유리할 수
있다.
• 비구조화된 질적조사의 경우 특별히 조사에 대한 방향성을 구체화
할 필요가 없으며, 연구자의 경험과 전문성에 의존하기 때문에 유형
화하는 것도 의미가 없는 경우가 많다.
• 반구조화된 또는 구조화된 질적조사의 경우에만 앞에 제시한 인과
관계, 이론기반형, 마인드맵형 조사설계 개념이 상황에 따라 적용될
수 있다. 다만, 이 경우도 어느 정도까지 구조화할 것인가에 대한 고
민은 해야 한다.
• 질적조사는 조사설계 대신에 연구의 내용이나 방향에 대한 고민이
나 구체화가 더 중요한 경우가 많으며, 이것이 조사설계를 대신하게
되는 경우가 많다.
• 그렇다고 질적조사는 아무런 준비 없이 진행하는 것은 아니며,
• 질적연구의 자유로움은 그 자체로 지식적 혹은 경험적 기반이 취약
한 연구자에게는 괴로움이 될 수 있다.
• 달동네 재개발과정에 대한 질적조사를 하기 위하여 대학원생을 거
주시키는 연구할 경우
 체계적인 훈련과 관찰지침이 있어야 한다. 관찰지침과 체계적인
훈련이 없다면 그는 연구를 하는 데 있어서 어려움을 겪게 될 것
이다.
 달동네의 재개발 과정을 그냥 눈으로 보이는 대로 서술하는 것
을 훈련 받을 수 있고,
 재개발 과정과 관련된 조직과 공공기관, 그리고 지역주민의 역학
관계에 대한 분석 지침이 있을 수 있다.
 이런 지침은 변화의 가능성이 항상 있다.
• 질적연구자가 유의해야 할 점
 통상적으로 조사구성 단계의 조사설계의 영역까지만 다룬다면
질적조사나 양적조사는 크게 차이가 나지 않는다.
 따라서 질적연구자도 조사설계에 대한 이해를 하고 있어야 한다.
특히, 비실험설계 조사설계에 대한 충분한 이해를 가질 필요가
있다.
 그러나 질적조사의 다변성을 고려하여 형식적인 조사설계에 얽
매이지 않고 유연하게 대처할 수 있는 능력도 함께 가지고 있어
야 한다.
- 수고하셨습니다 -