신뢰도와 타당도의 관계
개념
- 신뢰도 : 일관성 있게 측정하는 정도
- 타당도 : 측정하고자 하는 개념을 정확히 측정하는 정도
복합적 관계
- 신뢰도가 낮은 측정도구는 타당도 또한 낮음
- 신뢰도가 높다고 해서 반드시 타당도가 높은 것은 아님
- 타당도가 높은 측정도구는 신뢰도도 높음
측정 오류
개념
- 측정 과정에서 발생하는 오류
- 측정 오차라고도 함
- 타당도는 주로 체계적 오류, 신뢰도는 주로 비체계적 오류와 관련된 개념
체계적 오류
개인적 성향으로 인한 오류
- 측정 대상인 개인의 성향에 따라 나타나는 측정 오류
- 관용의 오류 : 무조건 긍정적인 응답으로 인한 오류
- 가혹의 오류 : 무조건 부정적인 응답으로 인한 오류
- 중앙집중 경향의 오류 : 무조건 중립적인 응답으로 인한 오류
- 대조의 오류 : 자기 자신과 상반되는 것으로 다른 사람을 평가하려는 오류
측정하려는 개념이 불일치할 때 발생하는 오류
- 태도를 측정하여 행동을 예측하는 경우 측정 오류가 발생할 수 있음
- 행동을 측정하여 태도를 예측하는 경우 측정 오류가 발생할 수 있음
분석단위 해석의 오류
- 조사자가 측정하려는 분석단위와 측정의 분석단위가 동일하지 않음에도 불구하고 동일하다고 판단할 경우 발생하는 측정 오류
- 생태학적 오류, 개인주의적 오류, 환원주의 등이 포함
편향(편견)에 따른 오류
- 고정반응에 의한 편향 : 설문지에서 일정한 유형의 문항들이 연속될 때 응답자들이 고정된 반응을 나타내는 것
- 사회적 적절성 편향 : 조사대상자가 실제와 달리 사회적 규범에 일치하는 응답을 하는 경우
- 문화적 차이에 의한 편향 : 측정 과정에서 문화적 차이가 반영되어 측정 오류가 발생되는 경우
- 측정자 또는 도구에 의한 편향 : 측정을 시도하는 조사자나 측정도구의 편향성에 의해 발생하는 측정 오류
- 조사대상자 편향 : 조사대상자들이 의식적 또는 무의식적으로 실제 견해나 행동을 숨기고 다른 방식으로 응답하는 경우
비체계적 오류(무작위적 오류)
- 조사자로 인한 오류 : 조사자의 건강, 기분, 관심사 등과 같은 신체적 · 정신적 요인 등에 의해 발생하는 측정 오류
- 측정대상자로 인한 오류 : 측정대상자의 긴장, 피로, 불안 등과 같은 신체적 · 정신적 요인 등에 의해 발생하는 측정 오류
- 측정상황 요인으로 인한 오류 : 측정장소, 측정시간, 좌석배열, 소음, 조명 등의 요인에 의해 발생하는 측정 오류