연구 설계의 분류 (6장)
상담연구방법론, by Heppner, P. P., Wampold, B. E., Owen, J., Thopso, M. N.
연구 설계의 분류
단순화시켜 다음 4가지로 분류
- 기술적 실험 연구 (descriptive experimental studies)
- 기술적 현장 연구 (descriptive field studies)
- 실험적 실험실 연구 (experimental laboratory studies)
- 실험적 현장 연구 (experimental field studies)
기술적 실험 연구 (descriptive experimental studies)
실험 통제없이 실험실에서 일종의 모의 연구를 관찰하는 연구
- 현재 그다지 많이 사용되지는 않음
예. 상담 수련생에게 (학생인) 내담자들을 면접보도록 하고, 모집한 내담자가 면접 테이프를 보면서 상담자의 반응에 대해 도움이 되는 정도를 평정하도록 함.
- 도움이 되는 반응들에 대한 군집분석을 통해 도움에 되는 반응들의 유형을 찾아냈음.
- 상담자의 반응을 조작하지 않았음.
- 회상을 통한 평정이므로, 내담자의 반응이 실제 상담에서의 반응과 다를 수 있음.
- 실제 현장에서 관찰한 것이 아니기 때문에 좀 더 수월하고 체계적으로 관찰을 기록할 수 있었음.
- 내담자가 상담자의 어떤 반응들이 도움이 된다고 지각하는지에 대한 이해를 높였음.
기술적 현장 연구 (descriptive field studies)
- 실험 통제 없이 실제 현장에서 수행
- 관심의 대상이 되는 (모)집단을 선택해 현장에서 관찰함으로써 외적 타당도(일반화)가 높음
- 실험 통제 없이 관찰만으로 이루어짐으로써 내적 타당도(인과관계 추론)가 낮음
대표적 연구 방식
- 정기적으로 수집하는 자료를 사용하는 회상연구 (retrospective studies): 예. 기관에서 정책상 수집하는 자료
- 개인 상담을 대상으로 한 단일 피험자 연구 (single-subject studies)
Menninger 프로젝트: 1000시간 이상 분석을 받은 환자들을 대상으로 35년에 걸쳐서 상담의 효과성을 검증한 대규모 연구
8년간 6천여 명에 대한 대학 상담 센터에서 수집한 데이터와 성인을 대상으로 유사한 임상실험 데이터를 비교 분석
- 유사한 효과를 확인
- 약물 남용이나 안정된 결혼관계가 아닌 내담자들에게 치료 효과가 떨어짐을 확인
- 다수의 대상자에 대한 실제 장면에서 수행된 연구이므로 일반화(외적 타당도)하는데 유리하나,
- 실험 통제가 없으며 중요한 정보들이 수집되지 않았으므로 인과추론(내적 타당도)에는 매우 신중해야함.
실험적 실험실 연구 (experimental laboratory studies)
- 자연상태를 모방한 실험실이라는 셋팅에서 이루지므로 외적타당도가 낮으나,
- 실험 통제를 통해 변수를 조작하여 인과관계 추론이 가능하므로 내적타당도가 높음
예. 공항장애 진단을 받은 사람들을 대상으로 두 가지 호홉 상반된 치료의 효과성을 연구
- 연구에 관심을 보인 369명 중 74명이 선발
- 3가지 그룹으로 무선 할당: 호홉치료 A, 호흡치료 B, 대기자
- 1달과 6달 후에 두 호흡치료 모두에서 공항장애 증상의 감소 보고
높은 내적 타당도를 보유하나, 선발 기준이 다음과 같이 제한적이었다는 점에서 보통의 사람들에게 일반화하기 어려움 (낮은 외적 타당도)
- 대기자 집단에 할당되면 치료가 8주 연기됨을 수용
- 다른 정신건강 진단이나 증상을 보인 사람들 제외
- 자살 가능성을 보고한 사람들 제외
실험적 현장 연구 (experimental field studies)
- (보통 조금 느슨한) 실험 통제를 하면서, 실제 현장에서 수행
- 실험 통제를 하면서 개입하기 때문에 완전히 자연 발생적인 상황이 아니므로 외적 타당도(일반화)는 높다고 볼 수 없음
- 현장에서는 실험 통제가 완전하기 어렵기 때문에 내적 타당도(인과추론)도 높지 않음
예. 관리 의료 회사를 통해서 공항장애 치료를 받으러 온 내담자들을 두 개의 치료 조건 중 하나에 무선 할당
- 실제 내담자와 숙련된 치료자를 활용했기에 높은 외적 타당도가 강조
- 반면, 치료 받기 전에 평가를 받았고, 녹음을 통한 실험 절차에 대해 반응했을 수 있으므로 외적 타당도에 위협
- 무선 할당한 점은 내적 타당도를 높힘.
연구 설계의 선택
특정 연구문제에 대해 어떤 특정 연구 설계가 유용한지를 결정하는 5가지 요인
- 현존하는 지식 기반을 검토
- 현존하는 지식 기반을 발전시키기 위해 선행 연구에서 사용된 연구 설계의 유형과, 도출된 추론을 고려
- 사용 가능한 자원을 고려
- 특정 연구 설계의 타당도에 대한 구체적 위협을 파악
- 위 네 가지를 통합적으로 고려
요인 1: 특정 연구문제에 대해 현존하는 지식에 기반
- 보통의 연구문제는 현존하는 연구와 이론을 기반으로 하여, 선행 연구가 제안하는 바와 탐구되지 못한 바 등을 파악할 필요가 있음
- 거의 다뤄지지 못한 주제나, 특정한 구체적인 측면에 대해 탐구하고자 한다면, 질적 연구 방법을 사용하는 것이 유용할 수 있음
- 예. 치료 과정에서 사회적 계급이 연관되는 방식에 대해 이해
- 예. 특정 치료에 대한 근거를 세운 연구가 많이 있으나, 그 치료에서 어떤 측면이 구체적으로 긍정적 효과에 기여하는지 대해 이해하는 것이 거의 없음
연구 설계의 유용성은 관심이 있는 특정 영역에서 기존 연구 지식의 맥락 안에서 평가되어야 함
다음과 같은 큰 질문을 고려
- 이 영역에서 아직 알려지지 않은 가장 중요한 것은 무엇인가?
- 무엇이 당신의 관심을 끄는가?
- 상담자와 내담자에게 임상적으로 유용한 것은 무엇인가?
- 삶에 긍정적인 영향을 미칠 수 있는 지식은 무엇인가?
- 내가 무엇을 말할 수 있기를 바라는가?
요인 2: 기존의 지식기반을 발전/확장시키는데 공헌이 되는가
- 예. 실험실 장면에서 주로 연구된 주제에 대해 “현장 연구”는 외적 타당도를 높힐 수 있도록 공헌
- 예. 엄격히 통제된 실험 연구에서 밝혀진 관계에 대해, 특정 정체성을 보이는 사람들에 대한 “기술 연구”가 추가 정보를 제공할 수 있음
- 예. 심료 치료 문헌에서 무선 임상 실험에 의존한 연구들은 심리치료가 어떻게 작동하는지(기제, mechanism)에 대해 거의 말해준 것이 없었음.
기존 연구에서 “방법”에 해당하는 부분을 주의 깊게 읽고, 연구 설계를 숙지할 필요가 있음
요인 3: 자원과 비용
실제로 현실 가능한 연구에서 요구되는 자원과 비용을 고려해야 함
- 재정, 시간, 물리적 공간, 기술적 한계 등
- 자료 수집에 필요한 소프트웨어, 하드웨어, 자료 분석 기술, 개입 기술
예. 상담자 기법과 작업동맹에 대한 내담자의 지각 간의 관계를 연구한다며,
- 지리적 지역, 선발 장소에 대한 접근성, 선발 기준, 연구팀의 규모
- 상관관계/관찰연구를 한다면, 30-50쌍의 내담자-상담자 쌍을 구해야 하고, 시간도 꽤 걸리나, 분석은 용이
- 단일 피험자 설계를 한다면, 1쌍만 구하면 되나, 깊이 관여하고 깊은 자료 분석이 필요
요인 4: 타당도에 대한 위협
연구 설계에 대한 한계와 강점을 인식: 완전한 설계는 없음
타당도에 대한 자세한 논의는 다음 장에서.
- 같은 주제에 대한 다양한 설계의 연구가 축적되면서 각 연구의 한계가 극복/보완됨: 각 연구 설계가 의미있음
찾아본 문헌 각각에 대해 다음을 정리하기를 제안!
- 사용된 연구 설계의 유형
- 사용된 연구 설계에 기초해서 도출된 추론의 강점과 한계점
- 이 연구를 확장할 수 있는 방법
위 4가지 요인은 서로 연관되어 있기에 동시에 고려하면서 연구 설계를 선택
선택과정에서 다음과 같이 정리하기를 제안!
연구 아이디어 각각에 대해
- 잠정적 연구 문제 또는 가설
- 잠정적 연구 설계
- 내적/외적 타당도에 대한 잠정적 위협
- 연구 설계의 실제적 고려: 재정, 시간, 에너지, 기타 자원 등