내적타당도와 외적타당도의 비교

내적타당도와 외적타당도를 비교하라

 

 

(가) 내적타당도(Internal Validity)

① 개념 :

* 이론적으로 정립된 논리적 인과관계의 타당성, 즉, 종속변수의 변화가 독립변수에 의한 것인지, 아니면 다른 조건에 의한 것인지 판별하는 기준.

* 실험으로 나타난 연구결과가 가정한 원인때문인지 아니면 다른 제3의 요인때문인지를 정확하게 설명하는 정도

② 내적타당도 저해요인 9가지

⑴ 우연한 사건(History) : “연구조사과정에 결과를 혼란스럽게 만드는 우연한 외부사건이 일어날 수 있다.”

⑵ 성숙 또는 시간의 경과(Maturation or the passage of time) : “사람은 조사 연구의 대상이든 아니든 계속 성장하고 변화하며, 그 변화는 연구조사결과에 영향을 미친다.”

⑶ 검사(Testing) : “검사로 측정하고자 하는 실제의 구성물에 어떤 개선이 없이도 검사과정으로 인해 검사점수가 높아지는 경우가 많다.”

⑷ 도구화(Instrumentation) : “사전검사 척도와 사전검사의 척도가 다를 경우에는 결과가 다를 수 있다.”

⑸ 통계적 회귀(Statistical Regression):“어떤 프로그램적인 개입이 없이도 시간이 흐르면서 서비스 수혜자 집단이 서비스를 받지 않은 집단보다 평균 점수가 더 많이 높아질 가능성이 많다. 극단적으로 매우 어려운 위치에 있는 상황에 있는 복지대상자에 대해 프로그램을 실시했을 경우 일어나는 변화를 독립변수의 효과로 잘못 알 수 있다.”

⑹ 대상자 선정편견(Selection bia) :“서비스를 이용하기로 선택하는 사람들을 서비스를 받도록 추천받지 못한 사람들 또는 서비스를 거부하는 사람들과 비교할 때 두 집단의 결과가 다르다고 할 수 없다”

⑺ 실험대상의 탈락(Experimental Mortality):“실험진행과정에서 일반적으로 대상자가 탈락하면, 통계적인 비교와 결론에 영향을 미칠 수 있다.”

⑻ 인과관계 영향의 방향 모호(Ambiguity about the direction of causal influence):“인과관계에서 종속변수(결과)가 독립변수(원인)보다 먼저 발생하였다면, 그 관계의 설명이 타당하지 않을 수 있다.”

⑼ 치료의 확산 및 모방(Diffusion or imitation of treatments):“현재의 개입방법이 이전개입방법보다 나은 프로그램이라고 할 경우, 두 치료개입방법을 대상자가 혼동하여 인식할 때 결과가 별 차이가 없게 나타날 수 있다.”

③ 내적타당도 저해요인 통제방법

⑴ 배합(Matching) : 실험집단과 통제집단을 동일하게 배합하는 방법, Example) 연령, 성별비율을 동일하게 하는 방법

⑵ 난선화(Randomization) : 대상자들을 실험집단과 통제집단에 무작위로 배치하는 방법, 대상자에게 일련번호를 붙여서 난수표를 이용하여 해당되는 번호의 대상자를 실험집단과 통제집단에 번갈아 배치하는 방법.

⑶ 통계적 통제(Statistical Control) : 통제변수의 값의 정도에 따른 분리분석(성별의 영향을 통제하려고 할 때 분석결과를 남녀별로 분리하여 분석하는 방법)(우수명,2002:97), 공변량분석(ANCOVA), 부분상관관계(Partial Correlation)

⑷ 통제집단에 대한 서비스 제공(Rubin,A. & Babbie E.,1999:32-330) : 새로운 프로그램(개입)이 서비스를 전혀 받지 않은 것보다 나은지를 확인하기보다는 기존의 프로그램보다 더 효과적인지를 결정하고자 할 때 사용한다.

(나) 외적타당도(External Validity)

① 개념 :

* 연구로 나타난 결과를 일반화 할 수 있는 정도, 실험설계와 같은 실험이 계속해서 반복되어 실험이 효과가 있다는 것이 반복적으로 증명될 때 외적타당도가 높은 설계라고 한다.

* 어떤 연구에서 서술된 인과관계가 그 연구의 조건을 넘어서서 일반화될 수 있는 정도

* 조사의 결과를 보다 많은 상황과 사람들에게 적용시킬 수 있는 정도

② 외적타당도 저해요인 3가지

⑴ 표본의 대표성 : “프로그램에 참여한 대상자의 수가 일반화할 수 있을 정도로 표본이 서정되었는가?“

⑵ 조사에 대한 대상자의 민간성 또는 반응성 : “클라이언트가 자신이 실험에 참여하고 있다고 인식하면, 그 인식 때문에, 실험상황을 넘어서면, 클라이언트의 문제가 프로그램에 의해 변화되었다고 일반화 할 수 없다”

⑶ 환경과 상황 : “일반적으로, 복지 프로그램은 해당 지역의 환경, 인구 및 상황에 영향을 받는다”

③ 외적타당도 저해요인 통제방법 : 확률적 또는 무작위 표본 추출방법 적용