신뢰도의 뜻과 일관성

• 추상적 개념을 객관적 수치로 바꾸는 과정에는 오류 가능성이 있어 측정 방법의 신뢰도와 타당도를 먼저 논의해야 한다.
• 신뢰도는 측정된 수치를 믿을 수 있는 정도로 같은 도구로 같은 사람을 여러 번 측정해도 비슷한 결과가 나오는 안정성을 뜻한다.
• 시기와 문항과 평가자가 달라져도 같은 결과가 재현되어야 좋은 검사이며 높은 신뢰도만으로 정확한 측정이 보장되지는 않는다.

측정의 어려움과 신뢰도의 뜻

• 사회과학에서 흔히 다루는 개념은 주관적이고 추상적이라 표준화된 척도를 만들기가 쉽지 않다.
• 이런 개념을 객관적인 수치로 표현하는 과정에서 오류가 생길 가능성이 있다.
• 그래서 개념을 측정하는 방법에 대해 신뢰도와 타당도를 논의하는 일이 반드시 앞서야 한다.
• 신뢰도는 측정된 수치가 어느 정도로 믿을 만한지 판단하는 개념이다.
• 다시 말해 측정의 안정성을 살펴보는 것이다.
• 하나의 개념을 같은 사람에게 같은 도구로 여러 번 측정했는데 결과가 매번 크게 다르면 수치를 믿고 쓰기 어렵다.
• 반대로 여러 번 측정해도 거의 비슷한 결과가 나온다면 그 수치는 믿고 사용해도 무방하다.
• 길이를 재는 자가 온도에 따라 늘었다 줄었다 한다면 사용 가치가 크게 떨어지는 것과 같다.

일관성과 재현 가능성

• 태도나 의견을 조사하는 도구도 마찬가지로 측정할 때마다 결과가 다르면 믿을 수 없다.
• 같은 태도를 가진 사람이 다른 응답을 하게 만드는 도구라면 신뢰하기 어렵다.
• 결국 신뢰도는 측정도구의 안정도와 정확도 측면을 뜻하며 조사에서 매우 중요한 개념이다.
• 신뢰도가 떨어지면 조사 결과 전체를 신뢰할 수 없게 된다.
• 신뢰도는 측정값들의 일관성을 뜻하며 일관되고 재현이 가능한 측정이 있는지 평가하는 기준이다.
• 좋은 검사나 조사는 시간과 문항과 평가자와 무관하게 일관된 결과를 주고 점수가 반복 측정에서도 똑같이 재현된다.
• 시기를 달리하거나 문항을 늘리거나 평가자를 더 늘려도 같은 결과가 나와야 한다는 뜻이다.
• 높은 신뢰도가 어떤 현상을 반드시 정확하게 측정했다는 뜻은 아니지만 도구가 잘못되면 타당도를 인정하기 어려워 신뢰도가 중요하다.

신뢰도가 높은 경우와 낮은 경우

핵심 개념

• 신뢰도 — 측정된 수치를 얼마나 믿을 수 있는지 판단하는 기준으로 측정의 안정성과 일관성을 뜻한다.
• 타당도 — 측정치가 측정하려는 대상을 제대로 가리키는 정도를 뜻하며 도구가 잘못되면 인정하기 어렵다.
• 재현 가능성 — 시간과 문항과 평가자가 달라도 같은 결과가 반복해서 나타나는 성질이다.
• 측정도구 — 태도나 의견 같은 개념을 수치로 바꾸어 조사하는 데 쓰는 도구이다.

자주 묻는 질문

• Q. 신뢰도란 무엇인가요?
  A. 측정된 수치가 어느 정도 믿을 만한지 판단하는 개념으로 측정의 안정성과 일관성을 살펴보는 것이다.
• Q. 신뢰도가 낮으면 어떻게 되나요?
  A. 같은 대상을 측정할 때마다 결과가 달라져 조사 결과를 믿을 수 없게 된다.
• Q. 신뢰도가 높으면 정확한 측정이라고 할 수 있나요?
  A. 높은 신뢰도가 정확한 측정을 반드시 보장하지는 않지만 도구가 잘못되었다면 타당도를 인정할 수 없어 신뢰도를 먼저 확인한다.

정리

신뢰도는 같은 도구로 반복 측정해도 비슷한 결과가 나오는 일관성과 재현 가능성을 뜻하며 신뢰도가 낮으면 조사 결과를 믿을 수 없다고 정리한다.