임용시험의 타당성과 신뢰성

핵심 정리

임용시험의 타당성은 시험이 측정하려는 능력을 제대로 재는지를 묻고, 신뢰성은 같은 시험을 다시 치렀을 때 결과가 일관되는지를 묻는다. 두 개념은 서로 다르므로, 한쪽을 검증한 결과로 다른 쪽까지 입증되었다고 볼 수 없다. 타당성은 측정하려는 것을 얼마나 정확히 재는지를 뜻하며, 기준·내용·구성타당성 등으로 나뉜다. 기준타당성은 시험 성적과 임용 후 근무성적이 얼마나 관련되는지를 보는 것이다. 내용타당성은 문항이 측정 영역을 대표하는지를 기준으로 판단하며, 직무에 정통한 전문가 집단의 판단으로 검증한다. 신뢰성은 측정의 일관성을 뜻한다. 같은 사람이 여러 번 시험을 치러도 결과가 크게 변하지 않는 일관성을 뜻한다. 신뢰도는 재시험법과 동질이형법 등으로 확인한다.

자세히

기준타당성과 예측 상관

임용시험 성적과 임용 후 근무성적의 연관성이 높으면 임용시험의 기준 타당성이 높다고 본다. 예측하려는 기준과의 상관을 살피는 것은 준거관련 타당도 검증이다. 시험 결과의 일관성을 묻는 신뢰도 검증과는 검증 대상이 다르므로, 두 검증을 같은 것으로 보면 안 된다.

신뢰도를 재는 방법

재검사신뢰도는 일정 기간 뒤 같은 시험을 다시 보게 하여 두 점수의 일관성을 확인한다. 재시험법은 시간차를 두고 같은 시험을 반복 실시하여 일관성을 확인하는 방법이다. 동형검사신뢰도는 문제 수준이 같은 두 시험유형의 성적 상관으로 신뢰도를 검증한다. 내적일관성은 하나의 시험 안에서 문항 간 상관을 종합하여 시험의 일관성을 살핀다. 이 방법들은 모두 신뢰도를 재므로, 타당성 검증 방법과 혼동해서는 안 된다.

타당성 검증 방식 비교

앞의 두 방식은 타당성을, 뒤의 두 방식은 신뢰도를 검증한다. 같은 시험을 두 번 치르는 방식과 문항 내용을 검토하는 방식은 서로 다른 물음을 다루므로 혼동해서는 안 된다.