신뢰도 (Reliability (Educational Evaluation))
한 줄 정의: 동일한 대상에게 검사를 반복 시행하거나 유사한 문항으로 측정했을 때 결과가 얼마나 일관되게 나타나는지를 나타내는 척도이다.
쉽게 풀면
같은 시험을 다시 봐도 비슷한 점수가 나오는지, 즉 결과가 얼마나 안정적이고 일관성 있는지를 나타내는 개념이다.
논문에서는 이렇게 쓰입니다
"서술형 문항 채점의 신뢰도를 채점자간 일치도 지수를 통해 검증하였다."
검사-재검사, 동형검사, 반분신뢰도 등 다양한 추정 방법과 함께 검사도구 개발의 기본 요건으로 다루어진다.
주의할 점
신뢰도가 높다고 해서 타당도가 보장되는 것은 아니며, 타당도 없는 신뢰도는 정확하지만 엉뚱한 것을 재는 것에 불과하다.