타당도의 의미와 종류 - 내용, 안면, 기준, 공인, 예언 구성, 수렴적, 차별적타당도

타당도

 

목 차

 

타당도의 의미와 종류

1. 내용타당토

1-1. 안면타당도

2. 기준타당도

2-1. 공인타당도

2-2. 예언타당도

3. 구성타당도

3-1 수렴적 타당도

3-2 차별적 타당도

 

 

타당도란?

 

- 측정하고자 하는 개념을 제대로 반영하는지 그 정도와 개념이나 속성을

얼마나 실제에 가깝게 정확히 측정하고 있는지의 정도를 의미

 

타당도에 영향을 주는 요인들

 

검사의 길이 – 검사의 길이가 길면 타당도가 증가하지만

길이가 길다고 반드시 타당도가 높아지는 것은 아님

 

신뢰도와의 관계 – 검사의 신뢰도가 높아도 타당도 역시 높다고 할 수는 없지만

검사가 타당하기 위해서는 신뢰도는 높아야 함

 

타당도의 종류

 

1. 내용타당도

 

- 연구자의 직관이나 전문가의 의견을 통해 파악하는 방식으로 적용이 쉽고 시간을 절약할 수 있음

- 그러나 그들의 주관적 판단에 의존하므로 오류의 가능성이 있음

- 측정하려는 속성과 항목 간의 상관관계를 파악할 수 없음

- 추상적인 개념에 대한 내용을 파악하기 어려우며 통계적 검증 또한 어렵다는 단점이 있음

- 다양한 외부적인 관점을 포함하여 주관성이 가지는 단점을 줄이는 것이 중요

- 능력이나 숙련도에 관한 검사에서 중요하게 다루어지는 타당도

 

1-1. 안면타당도 = 표면타당도

 

- 내용타당도와 마찬가지로

측정항목이 연구자가 의도한 내용대로 측정하고 있는지에 대한 것으로

전문가가 아닌 일반인 수검자들의 시각에서

검사 목적 혹은 주제가 잘 반영되어 있는지 확인하는 방법

 

- 문항이 적절한지에 대한 판단은 수검자의 평가로 이루어지므로

수검자가 측정하고자 하는 내용을 얼마나 타당하게 느끼는지의 정도

 

2. 기준타당도 = 준거타당도 = 경험적 타당도 = 실용적 타당도

 

- 측정 도구가 다른 기준과 얼마나 일치하는 지를 평가하는 개념

 

- 측정 도구의 결과가 이미 검증된 기준과 얼마나 잘 관련되어 있는지를 측정하여

해당 측정 도구의 타당성을 판단하는데 사용

 

- 현재의 점수로 미래의 수행수준을 예언할 수 있을까라는 의문과 관련이 있음

 

- 타당도 계수를 계산해 냄으로써 내용타당도에 비해 훨씬 객관적이고 비교가 쉬움

 

종류 - 공인타당도와 예언타당도

 

2-1. 공인타당도 = 동시타당도

 

- 해당 검사 점수와 준거점수 동시에 나온 상관계수

- 측정 도구의 결과가 이미 있는 기준과 얼마나 관련이 있는지를 평가

- 검사점수와 준거점수가 동일한 시점에서 수집

- 계량화되어 있어서 타당도에 대한 객관적인 정보를 제공

 

예> 새로운 영어 시험을 만들었고 토익, 토플, 아이엘츠에서 높은 점수를 받은 사람이

이 새로 만들어진 영어시험에서도 성적이 좋다면 이는 공인타당도가 높다고 판단

 

-> 측정 도구의 결과가 이미 알려진 기준과 높은 상관관계를 보이면,

그 측정 도구는 높은 공인타당도를 가진 것으로 판단

 

2-2. 예언타당도

 

- 측정 도구의 결과가 향후 결과를 예측하는 데 얼마나 유용한 지를 평가

 

예>

 

수능에서 만점을 받은 학생이 대학교에 입학해서도

모든 과목에서 A+를 받을 수 있을지 확인하는 경우

 

-> 측정 도구의 결과가 이후의 결과를 예측하는 데 유의미하면,

그 측정 도구는 높은 예언타당도를 갖는 것으로 판단 

 

3. 구성타당도 = 개념타당도 = 구인타당도 = 구조적타당도

 

- 측정 도구가 측정하고자 하는 개념 또는 구성 요소를 적절하게 반영하고 측정하는지를 평가

 

- 논문을 작성할 때 가설 -> 검증 -> 결과의 내용을 포함하는데

이 가설이 제대로 검증되었는지가 구성타당도와 관련이 있음

 

예>

 

행복한 사람은 하루 평균 잠을 8시간 이상 잔다는 가설을 세웠을 떼

행복과 수면시간의 관계를 제대로 검증했는지를 판단하는 것이 구성타당도

그러나, 행복이라는 개념은 추상적이고 조작적으로 정의 되지 않은 인간의 심리적 특성이므로,

이를 심리적 구성으로 분석하여 조작적 정의를 부여한 후

검사 점수가 이러한 심리적 구성으로 되어 있는가를 검정

 

이 가설에서 행복한 사람이란, 본인의 삶에 스스로 만족감을 느끼고

우울함이나 짜증 같은 감정을 오래 느끼지 않은 상태이며

좋은 일이 많이 생길 것 같은 기대나 풍족한 삶을 살고 있다고 느끼는 상태에 있는 사람이라는

조작적 정의를 내리고 검사 결과가 이러한 사람들이

실제 하루 평균 8시간 이상의 수면을 취하는지를 측정

 

-> 측정 도구가 특정 개념 또는 구성을 적절하게 측정하고 있는가에 대한 타당성을 검증하는데 사용 

 

종류

 

3-1. 수렴적 타당도 = 집중적 타당도

 

- 동일한 개념을 측정하기 위해서 상이한 측정방법을 동원하여

양쪽의 결과가 유사한지 확인하는 방법으로, 

같은 것을 측정한다면 측정 방법이 달라도 같은 결과를 나타내야 함

 

예>

 

지능을 측정하는 두 개의 서로 다른 지능검사의 결과 사이에 상관관계가 있다면

이 도구들의 수렴 타당도가 높다고 판단

3-2. 차별적 타당도 = 변별적 타당도

 

- 동일한 측정방법을 사용했지만 서로 완전히 다른 개념을 측정하여

양쪽의 결과가 분명하게 달라지는지 확인하는 방법

 

- 같은 유형의 검사라도 서로 다른 것을 측정할 때에는 다른 결과를 보여줘야 하고

확실한 차이가 나타난다면, 변별 타당도가 높다고 할 수 있음

 

예>

 

회사에서 신입 사원을 채용할 때, 

적성 검사를 실시한 결과가 지원자들의 IQ 검사 결과와 상관관계가 높게 나온다면,

이 적성 검사가 의도한 대로 적성을 측정한 것인지 아니면 IQ를 측정한 것인지 불분명해지므로

이는 차별적 타당도가 떨어진다고 판단할 수 있음

 

-> 검사의 결과가 이론적으로 관계가 없는 변인과 상관관계를 측정했을 때

둘 사이 관계가 낮을수록 차별적 타당도가 높다고 판단할 수 있음