즉, 우연한 사건이란 독립변수 외에 다른 우연한 외부적 사건이 사전 검사와 사후검사 사이에 발생하여 종속변수에 영향을 미치는 것을 의미한다.
사전 검사에 비해 사후검사에 좋은 점수를 얻었다고 이를 프로그램의 효과로 볼 수 있는가?
동일한 측정도구를 사용하여 동일한 방법으로 사전 검사와 사후검사를 실시한다면, 독립변수와는 무관하게 사전검사에 비해 사후검사에서 더 좋은 점수를 얻게 될 가능성이 높다.
그 결과, 사후검사에서 사전검사에 비해 점수가 향상되었다면, 이를 독립변수의 효과라고 단정할 수 있는가?
이 경우, 사후검사 점수가 크게 향상되었더라도 이를 근거로 프로그램의 효과성을 주장하기는 어렵다.
이들이 포함되지 않은 상태에서 사후검사 점수가 향상된 것을 독립변수의 효과로 보기는 어렵다.
자아존중감 향상 프로그램에 대한 연구에서, 칭찬하기 캠페인을 비롯한 다양한 우연한 사건들을 적절히 통제하지 않는다면, 사전 검사에 비해 사후검사에서 자아존중 감 수준이 향상된 것으로 나타나더라도 이 결과가 프로그램의 효과인지 혹은 칭찬하기 캠페인의 효과인지 구분하기 어렵다.
검사요인(측정, testing)
검사요인은 동일한 측정도구를 사용하여 두 번 이상 평가를 실시하는 모든 연구 설계에서 발생할 수 있다.
동일한 측정도구를 사용하여 동일한 방법으로 사전 검사와 사후검사를 실시한다면, 독립변수와는 무관하게 사전검사에 비해 사후검사에서 더 좋은 점수를 얻게 될 가능성이 높다.
검사요인이 동일한 측정도구를 사용하여 두 번 이상의 평가가 반복될 경우 발생하는 문제인 반면, 도구 요인은 사전 검사와 사후검사에서 서로 다른 측정도구를 사용하거나 평가자가 다른 경우에 발생하는 내적 타당도의 저해요
사전검사와 사후검사에서 사용된 측정도구의 난이도가 다르거나 측정자의 측정기준이 다르다면 종속 변수에 나타난 변화가 독립변수에 의한 것이 아니라 측정도구나 측정자의 차이에서 비롯된 것일 가능성이 있다.
도구 요인을 최소화하기 위해서는 가급적 동일한 측정자가 사전, 사후검사를 실시하도록 하고, 측정과정을 최대한 객관화시키고, 측정자에 대한 교육, 훈련을 철저히 할 필요가 있다.
이 경우, 실험집단이 통제집단에 비해 사전, 사후검사간의 점수 차이가 크더라도, 이것이 개입의 효과인지 또는 실험집단에 속한 부모의 자녀 양육에 대한 높은 관심에의 해 생긴 현상인 지 구분하기 어렵다.
프로그램이 진행되는 도중 1/3가량의 피해 여성들이 집으로 돌아가고, 돌아가지 않은 나머지 여성들만이 프로그램에 계속 참여했다면, 프로그램에 끝까지 참여한 여성들을 대상으로 사후검사를 실시하 고, 사전 검사와 사후검사를 비교하여 프로그램의 효과성을 평가할 수 있는가?
사회복지 사례관리 : 이채석 저, 어가, 2017
사회복지행정 실무 : 이세형저, 양성원, 2017
사회복지서비스 : 한국산업인력공단, 진한 엠앤비, 2015
[사회복지조사론] 연구의 내적 타당도와 외적 타당도를 낮게 하는 요인 [사회복지조사론] 연구의 내적 타당도와 외적 타당도를 낮게 하는 요인
목 차
Ⅰ. 타당도란
1. 개념
2. 내적타당도란
3. 외적타당도란
Ⅱ. 내적타당도를 저해하는 요인
1. 내적타당도를 저해하는 혼란변수 (confou..
[사회복지조사론] 연구의 내적 타당도와 외적 타당도를 낮게 하는 요인 [사회복지조사론] 연구의 내적 타당도와 외적 타당도를 낮게 하는 요인
목 차
Ⅰ. 타당도란
1. 개념
2. 내적타당도란
3. 외적타당도란
Ⅱ. 내적타당도를 저해하는 요인
1. 내적타당도를 저해하는 혼란변수 (confou..