신뢰도

1. 신뢰도(reliability)는 측정도구가 측정하고자 하는 것을 일관성 있게 정확하게 측정해 주는 정도를 말한다. 즉, 어떤 측정도구로 여러 다른 시기에 반복 측정을 하였을 때 나오는 결과 간의 일치 정도가 높을수록 신뢰성 있는 검사다.

2. 검사-재검사 신뢰도는 동일한 검사를 동일한 집단에게 일정 간격을 두고 두 번 실시하여 얻은 점수 간의 상관계수에 의해 추정되는 신뢰도다. (1) 검사와 재검사 사이의 간격이 가까울수록 연습효과로 인해 신뢰도가 높아질 수 있기 때문에 따라서 연습효과의 영향을 줄이고 검사들 간 상대적 비교를 좀 더 용이하게 하기 위해 2주 간격으로 두 번의 검사를 실시하도록 권장된다. (2) 검사 도구에 대한 피검자의 반응이 얼마나 안정적인가를 알려주기 때문에 검사도구가 가진 안정성(stability)에 대한 지표가 된다.

3. 동형검사신뢰도는 두 개의 동형검사를 제작한 뒤 동일한 집단에게 일정한 간격을 두고 실시하여 얻은 점수 간의 상관계수에 의해 추정되는 신뢰도다. (1) 동형검사신뢰도는 검사-재검사신뢰도와 달리 두 개의 동형검사를 가능한 한 가까운 시일 내에 실시한다. (2) 동형검사는 동일한 내용을 측정하여야 하고 동일한 문항형태와 문항수로 구성되어 있어야 하며 동일한 문항난이도와 문항 변별도를 가지고 있어야 하므로 동형검사의 제작에는 많은 어려움이 따른다.

4. 내적일관성신뢰도는 검사를 구성하고 있는 부분검사 또는 문항들 간의 일관성의 정도를 말한다. 즉, 내적일관성신뢰도는 검사를 구성하고 있는 부분검사 또는 문항들이 측정하고자 하는 내용을 얼마나 일관성 있게 측정하는 지를 알려준다. (1) 반분신뢰도 검사는 한 번 실시한 검사를 두 부분으로 나누어 두 부분검사 점수의 상관계수를 산출한 후 Spearman-Brown 공식으로 보정하여 추정하는 신뢰도이다. (2) 문항내적 일관성 신뢰도는 개별문항들을 하나의 검사로 간주하여 문항들 간의 일관성을 추정한 신뢰도다.

5. 채점자간 신뢰도란 두 검사자가 동일 집단의 피검자에게 부여한 점수들 간의 상관계수로 추정되는 신뢰도다.

6. 신뢰도 계수를 평가하는 절대적 기준은 없으나 검사 도구를 선정할 때 일반적으로 신뢰도 계수는 .80 이상을 기준으로 한다. 일반적으로 검사-재검사 신뢰도 계수가 가장 높게 산출되고 그 다음 동형검사 신뢰도, 반분신뢰도, 문항내적일관성신뢰도의 순으로 신뢰도 계수가 산출되는 경향이 있다.