신뢰도의 개념 및 신뢰도 측정 방법(사회복지조사론)

신뢰도는 반복적인 측정을 했을 때 동일한 결과를 가져오는 정도를 말합니다. 이는 연구의 정확성과 타당성을 보장하는 중요한 요소입니다. 신뢰도 측정 방법에는 재검사법, 동형검사, 복수양식법, 반분법, 내적 일관성 분석, 조사자 간 신뢰도가 포함되며 각각의 방법은 고유한 장단점을 가지고 있으며, 연구의 목적과 상황에 따라 적절한 방법을 선택해야 합니다. 신뢰도의 개념과 신뢰도 측정 방법에 대해 알아보겠습니다.

신뢰도의 개념에 대해 알아보자

신뢰도는 동일한 측정 방법으로 반복적인 측정을 했을 때 일관된 결과를 도출하는 것을 말합니다. 신뢰도는 연구의 정확성과 타당성을 보장하는 중요한 요소이며, 측정 도구의 정밀도와 밀접한 관련이 있습니다. 신뢰도가 높다는 것은 측정 도구가 일관된 결과를 제공한다는 의미이고, 연구결과의 신뢰성을 높여주는 역할을 합니다. 반대로, 신뢰도가 낮다면 측정 도구나 방법에 문제가 있을 수 있습니다. 예를 들어 양궁을 할 때 과녁 특정 부분에서 크게 벗어나지 않고, 여러 번 맞출 때 신뢰도 있다고 말할 수 있습니다.

신뢰도 측정 방법에 대해 알아보자

1. 재검사법(검사-재검사법)  

재검사법은 동일한 측정 도구로 동일한 대상에게 일정 시간 간격을 두고 두 번 실시해 그 결과 간의 상관관계를 평가하는 방법입니다. 예를 들어, 영어시험을 실시 후 일정 시간이 지난 후 다시 동일한 대상에게 동일한 영어시험을 실시하고, 두 결과를 비교하는 것입니다. 이 방법은 간단하지만 첫 번째 검사의 기억이 두 번째 검사에 영향을 미칠 수 있다는 단점이 있습니다.

2. 동형검사

동형검사는 동일한 대상에게 유사한 측정 도구를 사용하여 서로 다른 시기에 조사를 실시하고 상관관계를 평가하는 방법입니다. 예를 들어, TOEIC 시험 후 일정 시간이 지난 후 TOEFP 시험을 실시해 두 결과를 비교하는 것입니다. 이 방법은 재검사법의 단점을 보완하지만, 유사한 측정 도구를 개발하는 것은 매우 어렵고, 비용과 시간이 많이 소요된다는 단점이 있습니다.

3. 복수양식법(대안법, 평행양식법)

복수양식법은 동일한 개념을 측정하기 위해 여러 개의 상이한 측정 도구를 개발해 동일한 시기에 동일한 대상에게 순차적으로 조사를 실시하고, 상관관계를 검증하는 방법입니다. 예를 들어, 1교시 TOEIC, 2교시 TOEFP, 3교시 TEPS 시험을 본 후 각 시험 결과 간의 상관관계를 분석합니다. 이 방법은 다양한 측정 도구를 통해 동일한 개념을 평가할 수 있지만 많은 시간과 노력이 필요하다는 단점이 있습니다.

4. 반분법

반분법은 측정 도구의 항목을 체계적으로 반으로 나눠 각각을 독립된 척도로 간주해 결과를 비교하는 방법입니다. 예를 들어, 시험 문항을 홀수와 짝수로 나눠 두 집합으로 나눈 뒤 각각의 점수를 비교하여 상관관계를 평가합니다. 반분법은 스피어만-브라운 분석을 통해 두 반분 간의 상관관계를 계산합니다. 이 방법은 검사-재검사의 검사효과를 배제할 수 있지만, 문항을 정확하게 반으로 나눈다는 것은 매우 어렵다는 단점이 있습니다.

5. 내적 일관성 분석

내적 일관성 분석은 측정 도구의 개별 항목들이 전체 척도와 얼마나 연관이 있는지를 평가하는 방법입니다. 가능한 모든 반신뢰도를 계산하여 그 평균값을 신뢰도로 추정합니다. 그 후 크론바흐 알파 계수를 사용하여 평가하게 됩니다. 크론바흐 알파 값이 0.6 이상이면 신뢰도가 높다고 평가됩니다. 이 방법은 여러 항목 간의 평균 상관관계를 평가하여 신뢰도를 측정하는 데 유용합니다. 또한 신뢰도를 낮추는 문항에 대한 파악이 가능해 이를 삭제하거나 수정 및 보완할 수 있는 장점이 있습니다.

6. 조사자 간 신뢰도

조사자 간 신뢰도는 동일한 측정 도구를 여러 조사자가 사용해 동일한 대상을 평가하고, 평가자 간의 일치성을 평가하는 방법입니다. 예를 들어, 여러 평가자가 동일한 대상자의 만족도를 평가하고, 그 결과를 비교하여 상관관계를 확인합니다. 평가자 간의 결과가 비슷하면 신뢰도가 높다고 판단할 수 있습니다. 평가자가 여러 명이기 때문에 이 방법은 평가자의 주관적 편향을 최소화할 수 있습니다.