타당도와 신뢰도

타당도의 정의

• 타당도는 측정하고자 하는 것(검사 목표)을 얼마나 충실하게 측정하는 정도
• 검사도구가 검사의 사용 목적에 부합하는 정도

타당도의 종류

• 내용 타당도 : 검사 문항들이 목표를 반영하는 정도 (이원 분류표)
• 구인 타당도 : 측정하고자 하는 심리적 특성의 구성요인을 이론적으로 타당화하여 그 측정 결과를 정당화하는 정도
• 예연 타당도 : 평가도구가 피험자의 미래 능력이나 행동을 예측
• 공인 타당도 : 두 평가 도구의 공통된 부분의 일치성 정도
• 준거 타당도 : 예언 타당도와 공인 타당도

신뢰도의 정의

• 측정하려는 것을 오차 없이 얼마나 안정적으로 일관성 있게 측정하는 정도
• 오차가 크면 신뢰도는 낮고, 오차가 적으면 신뢰도는 높음
• 신뢰도는 상관계수를 사용하여 측정

신뢰도의 종류

• 재검사 신뢰도 : 동일한 검사를 동일한 피험자 집단에 일정 시간 간격을 두고 두 번 실시하여 얻은 두 검사 점수의 상관계수에 의해 신뢰도를 검증하는 방법
• 동형 검사 신뢰도 : 두 개의 동형 검사를 제작한 뒤 동일 피험자 집단에게 검사를 실시하여 두 검사 점수의 상관계수로 신뢰도를 추정하는 방법
• 반분 검사 신뢰도 : 한번 실시한 검사 점수를 두 부분으로 나누어 두 부분 검사 점수의 상관계수를 계산한 후 스피어맨 - 브라운 공식으로 신뢰도를 추정
• 문항 내적 일관성 신뢰도 : 문항 하나하나를 하나의 검사로 간주하여 문항들 간의 유사성 혹은 측정의 일관성을 검증하는 방법

반응형

신뢰도 향상 방법

• 답지수, 문항수 : 문항수와 답지수를 가능한 많이 출제
• 골고루 출제 : 범위 내에서 골고루 출제
• 문항 곤란도 중간 : 문항 곤란도가 중간 정도인 문항을 많이 사용
• 문항 변별도 높은 문항 :문항 변별도가 높은 문항을 많이 사용
• 환경 유사 : 검사 환경을 유사하게 유지
• 진술 : 문항의 진술을 명확
• 교육목표 : 평가목표를 명확하게 설정
• 범위 : 검사 범위는 좁게 출제
• 문항 동질성 : 문항의 구성을 동질화