측정

4주차

측정(Measurement)

학 습 내 용

1. 측정의 개념과 의의 2. 측정의 수준

3. 측정오차

4. 측정의 타당도와 신뢰도

학 습 목 표

1.측정의 개념과 기능을 설명할 수 있다.

2. 측정의 4수준의 속성을 예를 들어 설명할 수 있다.

3. 측정 오차에 대해 설명할 수 있다.

4. 측정의 신뢰도와 타당도의 개념을 비교하여 설명할 수 있다.

5. 측정 신뢰도 평가방법을 설명할 수 있다.

6. 측정 타당도 평가방법을 설명할 수 있다.

1. 측정의 개념과 의의

1)

측정의 개념



측정 대상은 매우 다양.

측정이 용이한 것도 있으나 추상적인 개념들은 개념화와 조작화 과정을 거쳐 측정함.



수치화 함

숫자가 단순 분류 도구 / 수량적 의미가 있는 경우



일정한 규칙에 따라 이루어짐.

연구자가 관심을 가지고 있는 현상이나 대상, 개념에

대하여 숫자를 규칙에 따라 할당하는 과정

2) 측정의 역할과 중요성

측정은 추상적인 개념(관념적 세계)와 경험적 현실을 연결 일치시키기 위한 규칙과 절차 를 제공함.

주관적인 차원을 넘어서 객관성을 확보할 수 있게

해줌

통계분석을 활용할 수 있는 정보를 제공함

다른 사람에 의해서도 반복해서 확인, 반증이

가능하도록 함.

측정의 기능

일치의 기능 표준화 기능

계량화 기능 반복의 기능

2. 측정의 수준

측정 대상의 속성에 따라 측정 수준이 달라지는데 일반적으로 사회과학에서는 4수준이 있음.

• 어떤 사물의 속성을 질적인 특성에 의해 상호배타적인 몇 개의 카테고리로 나누어 측정하는 변수

• 단 그 수치가 아무런 의미가 없는 변수(종교, 성별)

•

상호배타적이어야 함.

잘못된 예 : 1) 수도권 2) 영호남권 3) 남부권 (영호남권과 남부권은 중복됨)

• 포괄적이어야 함.

잘못된 예 : 1) 개 2) 고양이 (개, 고양이 외 내용을 담고 있지 못함)

• 단일차원이어야 함.

명목(분류)

•어떤 사물의 속성을 상호배타적 속성을 가진 카테고리로 나눌 수 있고 카테고리 간의 서열(순서)를 측정할 수 있는 변수

• 부등호 사용 가능

• 예

1) 그렇다 – 보통이다 – 그렇지 않다

2) 석차

3) 주관적 경제상태 : 상 – 중 - 하

• 단 카테고리간 등간의 속성이 없음

서 열(분류+순서)

•

카테고리간의 분류, 순서, 등간의 속성이 있는 변수

•단 절대 0값의 개념이 성립되지 않음 (배수의 개념이 성립하지 않음)

• +, - 연산 가능함.

•예 : 온도 , IQ , 지능지수,

등간(분류+순서+등간)

• 카테고리간 분류, 순서, 등간, 비율(배수)의 개념 활용이 가능한 변수

• 절대 0값이 있어 사칙연산이 가능함.

• 예 : 몸무게, 월평균 소득, 길이, 사건 빈도 등

김태성 외( 2006, p.86)

비율(분류+순서+등간+비율)

구분 분류 순위 동일간격 절대영점 수학연산

명목 ○ X X X 해당안됨

서열 ○ ○ X X 해당안됨

등간 ○ ○ ○ X 덧셈, 뺄셈

비율 ○ ○ ○ ○ 덧셈, 뺄셈

곱셈, 나눗셈

측정수준이 높은 척도를 사용해야 하는 이유

엄밀한 정보를 얻을 수 있다.

예) 크다 . 작다 Vs 미터법(m <

cm)

높은 수준 >>>

낮은 수준으로의 정보전환은 가능하나 반대는

불가능

높은 수준의 측정은 활용할 수

있는 통계기법이 다양함.

3. 측정오차

1) 측정오차

 측정값(관찰값) = 참값 + 오차

 측정대상의 진정한 값과 실제 측정도구를 사용하여 얻어진 측정값과 의 차이 (+, - 값을 가질 수 있음)

 측정 오류(체계적 오류 Vs 무작위적 오류)

체계적 오류

- 측정과정에서 우연하게 작용하는 것이 아니라 체계적으로 작용하는 요인에 의하여 일정한 방향과 크기로 측정값에 영향을 미치는 오류.

- 측정대상의 속성 : 사회적 바람직성, 적절성을 고려한 반응(IDS)

- 연구자의 사회경제적 특성 : 중산층 문화 중심의 IQ측정도구 , 문화적 속성

비체계적 오류 (무작위적 오류)

- 일정하게 작용하는 오류가 아니라 일관성 없이 무작위로 영향을 미치는 요인

- 여러 번 반복 측정하는 과정에서 오류가 서로 상쇄되어 소멸할 수 있음 즉, 다수 측정결과는 평균값과 유사해짐

2) 측정수준과 측정 오차의 관계

•

측정 대상의 수준을 높이면 오차가 포함될 가능성이 높음

• 높은 수준의 측정이 가능하면서 측정 오차가 적은 공인된 측

정도구를 활용

4. 측정의 타당도와 신뢰도

 어떤 척도가 좋은 척도인가?.

 특정 척도를 이용해 측정한 측정값이 믿을만한 것인지를 평가할 수 있는 것이 척도의 타당도와 신뢰도 임.

1) 타당도의 개념과 유형 (1) 개념

⑉ 타당도 개념의 특성

① 측정하고자 하는 대상과 해당 척도 사이의 일치 여부를 중요시함.

② 척도의 타당도를 정확히 측정할 수 있는 도구가 객관적으로 존재하는 것이 아니라 기본적으로 전문가들의 추정과 합의에 근거한다.

(2) 타당도의 유형과 평가방법

•측정도구를 구성하고 있는 내용이 가지고 있는 대표성의 정도

•특정 도구를 구성하고 있는 내용들이 자신이 측정하고자 하는 개념이 포함하고 있는 의미의 범위를 담고 있는 정도

•논리는 간단하지만 측정 대상 자체가 추상적 개념이면 내용타당도를 정확하게 확인하기는 어려움

•객관적 절차나 기준이 있기보다는 전문가의 판단 및 합의에 근거해 결정

내용타당도(액면타당도)

• 연구에 사용할 측정도구의 측정값과 이미 잘 알려진 측정 도구의 측정값이 유사한 정도

• 추상적 개념과 구체적 측정을 직접 연결하기보다는 특정 개념에 대하여 이미 타당도가 확인된 다른 측정도구를 기준으로 삼아 현재 개발된 도구의 타당도를 검토하는 것

1) 예견타당도(예측타당도)

• 측정도구가 미래의 현상이나 사건을 측정하거나 예견하는데 얼마나 타당한가?

예) 운전면허 필기시험의 타당도- 실제 주행능력 2) 일치타당도

측정도구가 현재의 상태나 상황과 부합 정도

예) 비행척도 - 현재 비행(비행으로 체포된 사례)과 관련성

기준타당도(실용적타당도)

• 구성체

(construct) :

• 측정되는 개념이 전반적인 이론 틀 속에서 다른 개념과 관련성을 가지는 정도로 판단함. 이론적으로 연관 있는 다른 추상적 개념과 특정한 방식의 상관관계가 있으면 타당도가 있다고 인정

예) 이타심 ----이기심, 적대감 ----자선행위, 희생심 1) 수렴타당도

이론적으로 동일한 구성체 혹은 서로 비슷한 의미를 가지는

구성체를 각각 상이한 척도를 가지고 측정할 경우 서로 수렴할 것임.

2) 판별타당도 : 서로 다른 구성체라면 부적 관계를 가질 것임.

구 성 체 타 당 도

2) 신뢰도의 개념과 평가방법

(1) 신뢰도의 개념



측정값들 사이에 높은 정도의 일관성



좋은 척도라면 동일한 대상을 여러 번 측정하여 경우 모 두 동일한 측정값을 얻을 수 있어야 한다.



신뢰도가 떨어지는 척도 : 고무줄로 키재기

타당도

신뢰도

• 동일 대상에 대하여 하나의 척도를 일정한 시간 간격을 두고 반복해서 측정한 다음 그 측정값을 비교하는 방법.

• 신뢰도가 높다면 측정값들이 동일할 것임.

• 장점 : 용이, 절차 간단

• 단점 : 시험효과발생(특히 태도나 가치, 감정과 같이 주관적 개념 측정시)

• 그렇다고 시간 간격을 오래 두면 성숙효과, 역사효과 발생

검사- 재검사 방법 (2) 신뢰도 평가방법

• 하나의 척도를 둘로 나누어 동일한 대상에 대하여 동시에 측정한 후 값을 비교해 본다

• 단점 : 하나의 척도를 정확히 반분하는 것이 어려움

• 하위 영역이 존재해 반분하는 것이 바람직하지 않을 수 있음

반 분 법

• 동일한 대상을 측정하도록 고안된 독립된 서로 다른 두개의 척도를 동일 대상에 대하여 동시에 사용하는 것이다.

• 단점

-어떻게 찾을 것인가?

-만약 두 측정값 사이에 상관관계 낮게 나오면 어떤 척도가 문제인가?

-따라서 둘 중 하나는 공인된 척도여야 한다.

대안비교법, 복수척도법, 병행척도법

2) 신뢰도 평가방법

• 문항들을 반으로 나누는 방식에 따라 신뢰도 계수가 달라지는 반분법의 문제를 해결하기 위해 반분법에서 산출한 모든 신뢰도 계수들의 평균값으로 신뢰도를 계산하는 방법.

• 단일한 신뢰도 계수 Cronbach'α값을 컴퓨터 통계프로그램을 이용해 산출할 수 있음.

• 문항의 수가 증가할수록 신뢰도 계수가 커짐

• Cronbach'α값은 0에서 1까지의 값을 갖는데 0.6 - 0.8 이상 정도면 OK 내적일관성측정법

3) 신뢰도와 타당도의

관계

타당도가 높으면 신뢰도도 높지만, 신뢰도가 높다고 해서 타당도가 반드시

높은 것은 아니다

(0점 초점이 잘못 맞춰진 저울로 몸무게를 쟀다면? 신뢰도는 높지만 타당도는 낮다)

척도의 신뢰도와 타당도는 일정 정도 상충관계. 즉, 개념의 다양한 측면을 반영하기 위해서는 척도가

다차원적으로 복잡해짐, 그러면 측정에서 발생할 수 있는 오차가

커져 신뢰도가 낮아질 것임.

신뢰도는 비체계적 오류(무작위적 오류)와

관련된 개념이라면 타당도는 체계적 오류와

관련 있다.

※※※※※

타당도가 높은 측정은 항상 신뢰도도 높다

타당도가 낮다고 해서 반드시 신뢰도가 낮은 것은 아니다

신뢰도가 높다고 해서 반드시 타당도가 높은 것은 아니다

신뢰도가 낮은 측정은 항상 타당도가 낮다

신뢰도가 낮고 타당도가 높은 측정은 없다

맞으면 O, 틀리면 X !!!

1. 측정은 이론적 세계와 경험적 세계를 연결시켜주

는 방법이다 O

2. 측정은 대상의 통계적 처리를 가능하게 한다.

O

3. 측정의 대상의 양적 속성을 질적 속성으로 전환하

는 방법이다. X

4. 측정의 본질은 측정 대상의 세계를 수치의 세계와

대응시키는 것이다. O

학습정리

섭씨온도

초졸-중졸-고졸-대졸 교육년수

월수입

1-10점 까지의시설이용만족도

종교 유무

등간

서열

비율

비율

서열

명목

학습정리

한나라당 지지율 인종

303호, 304호, 305호 주관적 건강: 상-중-하

장기요양 1등급, 2등급, 3등급

장애등급

비율 명목

명목

서열

서열

서열

학습정리

같은 조사 대상자에게 한 척도를 시차를 두고 신뢰도를 측정하는 방법?

성격검사 측정도구 개발시 기존 성격검사를 통한

성격유형 사이의 상관관계를 통해 타당도를 측정하는 것?

항목 간의 평균적인 관계에 근거한 것으로 내적일관성 신뢰도를 측정하는 계수는?

측정도구를 임의로 절반으로 나누어 같은 시간에 두 개의 척도를 사용해 신뢰도를 추정하는 방법은?

측정되는 개념이 이론적 틀 속에서 다른 개념들과 관련성을 갖고 있는 정도를 경험적 검증하는 방법은?

연구 대상을 적절히 측정하고 있는가에 대한 판단에 의해 평가되는 타당도는?

검사-재검사법 기준타당도

크론바하 알파계수

반분법 구성체타당도

액면타당도

학습정리

학습정리

1. 어떤 선생님이 학생들의 지능지수(IQ)를 측정하기 위해 정확하기로 소문난 전자저울 (체중계)을 사용했을 때, 측정의 신뢰도와 타당도에 관한 설명으로 옳은 것은?

㉮ 신뢰도와 타당도 모두 낮다. ㉯ 신뢰도와 타당도 모두 높다.

㉰ 신뢰도는 낮지만 타당도는 높다. ㉱ 신뢰도는 높지만 타당도는 낮다.

2. 다음 괄호 안에 들어갈 알맞은 것은?

“ (ㄱ)는 개개인들을 서로 구분하는 범주들로 나눌 수 있을 뿐만 아니라 이들을 일정한 기준에 따라 서열화시킬 수 있기 때문에 (ㄴ)보다 상위수준의 측정이다.”

㉮ ㄱ - 명목측정 ,ㄴ - 서열측정 ㉯ ㄱ - 등간측정 ,ㄴ - 비율측정 ㉰ ㄱ - 명목측정 ,ㄴ – 비율측정 ㉱ ㄱ - 서열측정 ,ㄴ - 명목측정

학습정리

3. 다음 중 측정수준별 그 예가 틀린 것은? ( )

㉮ 서열측정 - 학급 석차(등수) ㉯ 비율측정 - 지능지수(IQ) ㉰ 명목측정 – 주민등록번호 ㉱ 등간측정 - 온도

4. 연구대상자의 속성을 일정한 규칙에 따라서 수량화하는 것을 무엇 이라 하는가?( )

㉮ 척도 ㉯ 측정 ㉰ 요인 ㉱ 속성

5. 여러 문항으로 이루어진 척도의 신뢰성을 보여주기 위해 제시하는 통계치 는?

㉮ 크론바하α ㉯ 평균 ㉰ 표준편차 ㉱ 분산

학습정리

6. 신뢰성 측정방법인 재검사법(Test-retest Method)에 관한 설명으로 옳은 것은?

㉮ 홀수문항과 짝수문항의 응답을 비교하는 방식으로 수행하기도 한다.

㉯ 내적 일치도를 측정하는 신뢰성을 측정방법이다.

㉰ 검사-재검사 간격이 너무 짧으면 기억효과 때문에 신뢰성이 낮아진다.

㉱ 동일한 문항을 반복해서 측정하는 것이다.

7. 측정오차의 발생원인과 가장 거리가 먼 것은?

㉮ 통계분석기법 ㉯ 측정방법 자체의 문제

㉰ 측정시점에 따른 측정 대상자의 변화 ㉱ 측정시점의 환경요인

학습정리

6. 신뢰성 측정방법인 재검사법(Test-retest Method)에 관한 설명으로 옳은 것은?

㉮ 홀수문항과 짝수문항의 응답을 비교하는 방식으로 수행하기도 한다.

㉯ 내적 일치도를 측정하는 신뢰성을 측정방법이다.

㉰ 검사-재검사 간격이 너무 짧으면 기억효과 때문에 신뢰성이 낮아진다.

㉱ 동일한 문항을 반복해서 측정하는 것이다.

7. 측정오차의 발생원인과 가장 거리가 먼 것은?

㉮ 통계분석기법 ㉯ 측정방법 자체의 문제

㉰ 측정시점에 따른 측정 대상자의 변화 ㉱ 측정시점의 환경요인

학습정리

8. 다음 질문항목의 문제점을 지적한 것으로 가장 적합한 것은?

“귀하께서 현금서비스 받으신 돈을 주로 어떤 용도로 사용하십니까?”

①생활비 ②교육비 ③의료비 ④신용카드 대금 ⑤부채청산 ⑥기타

㉮ 가능한 응답을 모두 제시해 주어야 한다.

㉯ 응답항목들 간의 내용이 중복되어서는 안 된다.

㉰ 하나의 항목으로 2가지 내용의 질문을 해서는 안 된다.

㉱ 대답을 유도하는 질문을 해서는 안 된다.

참고문헌

김영종. 2007. 사회복지조사방법론. 학지사.

김태성 ·김기덕·이채원·홍백의. 2005. 사회복지조사론. 청목출판사.

수험기획실. 2012. 사회조사분석사 2급 기출문제해설. ㈜시대고시학원

이종환. 2011. 맥락으로 이해하는 사회과학조사방법론. 공동체.

채구묵. 2009. 사회복지조사방법론. 양서원.

Rubin & Babbie. 1997. Research Method for Social Work.

Brooks/Cole publishing Company.