Company LOGO
측정수준과
신뢰도 및 타당도
사회복지조사론
Ch.6
1. 측정의 개념
• 사회현상이나 대상, 개념 등에 일정한 규칙에 따라 숫자를 할당
• 고려할 점
1) 사회과학의 대상은 측정하기 어렵다 – 개념화와 조작적 정의가 선행되어야 함 2) 측정은 계량화가 목적 – 숫자 부여 자체가 모두 의미 있는 것은 아님.
3) 대상에 숫자를 부여하는 작업은 일정한 규칙에 따라 이루어진다.
1
절
.측정의 개념과 의의
2. 척도를 구성할 때 고려사항
① 상호 배타적 : 척도에서 분류된 범주는 다른 범주와 관계가 상호 배타적 (mutually exclusive)
② 포괄적 : 같은 범주 안에서는 포괄적(inclusive)
③ 응답범주들이 논리적 연관성 확보가 중요
④ 여러개의 문항으로 이루어진 경우 문항들 간 내적 일관성이 있어야 함 (internal constancy)
1
절
.측정의 개념과 의의
1. 측정의 수준
측정수준은 크게 연속과 비연속수준으로 구분할 수 있음.
*연속수준의 측정
=> 등간측정(interval measurement), 비율측정(ratio measurement) 사칙연산이 가능
* 비연속수준의 측정
⇒ 명목측정(nominal measurement), 서열측정(ordinal measurement) 측정값이 합산의 의미가 없기 때문에 사칙연산을 하지 않음
2
절
.측정의 수준
2. 측정수준과 측정오차
1) 측정오차(measurement error)
측정값 혹은 관찰값(observed score)=참값(true score) + 오차(error)
• 체계적 오류 : 측정도구 개념구성에 문제가 있음. 척도 타당도와 관련
• 비체계적 오류 : 측정당시 상황, 일시적 요인 등으로 발생. 척도 신뢰도와 관련
2) 측정수준과 측정오차의 관계 : 측정수준이 높은 척도일수록 엄밀한 정보 제공
2
절
.측정의 수준
1. 타당도의 개념과 유형
1) 타당도의 개념 : 측정도구가 현상을 얼마나 정확하게 측정하는가?
- 특정 척도는 측정하고자 하는 대상과 일치 여부가 중요
- 특정 척도의 타당도는 전문가들의 추정과 합의에 의해 결정 - 기존 측정도구 중 타당도가 인정된 것과 비교하는 방법
- 요인분석을 통해 유사개념으로 묶어보고, 이론적 개념 구성과 비교
2) 타당도의 유형과 평가방법
(1) 내용타당도 : 척도 구성 내용의 대표성(추상적 개념일 경우 용이하지 않다) (2) 기준타당도 : 이미 타당도가 확보된 척도를 기준으로 비교(동시/예측타당도) (3) 구성(체)타당도 : 관련 이론으로부터 도출된 요인과의 연관성(수렴/판별타당도)
3
절
.측정의 신뢰도와 타당도
3) 타당도 구하는 방법
(1) 내용타당도 : 측정하고자 하는 개념을 명확하게 정의하고, 이를 주요 영역별로 나누는 작업이 있어야 함. 각 영역이 뜻하는 의미를 모두 포함할 수 있도록 세부영역을 정한다음 이에 맞는 질문들을 구성
(2) 기준관련 타당도 : 각 측정도구의 평균을 구한다음 이들 평균값의 상관관계 를 구함
(3) 구성타당도 : 이론적으로 서로 관련이 있다고 생각되는 개념들은 높은 상관관계를 보여야 하며, 판별타당도의 경우 관련성이 낮은 개념들 간의 상관관계가 낮게 나타나야함
3
절
.측정의 신뢰도와 타당도
3) 타당도 측정의 문제점
(1) 내용타당도는 주로 전문가들의 판단에 의해 결정. 동일 분야의 전문가 간에도 내용타당도 기준이 다르게 적용될 수 있음에 유의
(2) 기준타당도를 확보하려는 경우 기존 측정도구와 차별성이 있어야 할 것 (3) 구성타당도는 실제 이론적 구성 개념과 측정도구의 요인분석 결과가 동일하게 나타나지 않을 수도 있음
=> 복잡한 사회현상을 측정도구로 대체하는 작업은 한계가 있을 수 있음
3
절
.측정의 신뢰도와 타당도
2. 신뢰도의 개념과 평가방법
1) 신뢰도의 개념 : 측정도구의 반복측정시 일관성 정도
- 동일 측정대상에 반복 측정하였을 경우 거의 동일한 측정값을 얻었야 함.
- 측정대상과 무관하게 측정 결과로 얻어진 값 사이의 관계
2) 신뢰도의 유형과 평가방법
(1) 검사-재검사법 : 동일한 대상에 동일 척도를 반복 측정한 다음 비교(성숙효과) (2) 반분법 : 문항을 반으로 나누어 측정 값 비교, 시험효과 제거, 어떻게 나눌까?
(3) 대안비교법 : 복수척도법. 유사한 측정도구를 2개 이상 개발. 측정 후 값 비교 (4) 내적일관성 측정법 : 문항간 평균 상관관계. Cronbach’s alpha coefficient
3
절
.측정의 신뢰도와 타당도
2. 신뢰도의 개념과 평가방법
• 신뢰도를 높이는 방법
(1) 측정 문항이 애매하면 신뢰도를 정확하게 측정하기 어렵다.
(2) 문항수가 충분하게 구성한다 : 크롬바 알파값 공식에서 문항수가 중요 (3) 면접자의 면접태도가 일관성 있어야 함
(4) 이전에 신뢰성이 높다고 인정된 측정도구를 이용하는 방안도 있음.
3
절
.측정의 신뢰도와 타당도
3. 신뢰도와 타당도의 상관관계
1) 신뢰도와 타당도는 서로 비대칭적 관계
=> 신뢰도가 높으면 타당도가 높다( × )
=> 타당도가 높으면 신뢰도가 높다( 0 )
2) 신뢰도는 비체계적 혹은 무작위 오류와 관련 타당도는 체계적 오류와 관련
3) 척도의 신뢰도와 타당도는 일정 상충관계를 가진다.
3
