문 항 분 석
개념 1.
한 검사 속에 포함되어 있는 문항들이 얼마나 적합하며 제구실을 하고 있는지를 검토, , 분석하여 문항의 개선을 목적으로 하는 것 이때 문항분석은 선택형 문항에 한함,
문항변별도 문항타당도
2. (= )
어떤 검사의 개재 문항이 그 검사에서 득점이 낮은 학생과 높은 학생을 식별 또는 구 1)
별해 줄 수 있는 변별력
문항이 피험자의 상하능력을 잘 구별해 내는지를 뜻함 변별도 지수
2) ->
검사의 총점이라는 내적준거 의 의해 문항의 타당도를 고려
3) ‘ ’
변별도 지수는 부호를 가지면서 그 값이 크게 나와야 바람직
4) +
변별도 지수는 에서 사이에 분포 존재영역
5) -1.00 +1.00 ( )
변별도 지수가 0.3에서 0.7 사이에 분포→변별도가 있다고 할 수 있는 수준 가장 이상적인 것은 일때
(cf) 0.5
규준지향평가와 목표지향평가에 모두 유용 6)
학습의 실패자와 성공자를 잘 변별해내는 교육목표가 어느것인지 확인하는데 중요한 7)
정보를 제공
상부집단에 속하는 피험자가 하부집단의 피험자보다 각 문항에 대한 정답의 확률이
8) ( )
높 아야 그 문항의 변별도가 있는 것임 계산식
9)
의 문항변별도 평가기준 10) Ebel
문항변별도 지수 문항평가
미만 .10
이상 미만
.10 - .20
이상 미만
.20 - .30
이상 미만
.30 - .40 이상 .40
변별력이 없는 문항 변별력이 매우 낮은 문항
변별력이 낮은 문항 변별력이 있는 문항 변별력이 높은 문항
문항곤란도 문항난이도
3. (P)(= )
한문항의 어려운 정도를 나타내는 것으로 한 문항에 정답한 사람의 백분율로 표시 1)
문항배열의 순서를 정하는데 사용 2)
일반적으로 평균 정도가 이상적이며 까지 곤란도가 바람직
3) 50% , 30 70%~
한 문항에서 정답을 한 사람의 수가 많으면 많을수록 문항곤란도 의 값이 커짐
4) P
절대평가 이면 교수 학습이 성공한 것이고 이면 교수 학습과정을 개선
5) - P=100 - , P=0 -
해야 할 증거로 봄
상대평가 - P=100이거나 P=0일 때 문항이 어딘가 잘못되어 있다고 봄
목표지향평가에서는 학습과제의 초기단계에서의 문항은 학생들이 오답에 대부분 반응 6)
하고 정답에는 적게 반응 학습이 진행되어 점차 학습과제의 끝에 이르면 이를수록 그 때, , 실시한 형성평가의 문항에 오답반응을 하는 학생이 감소되어 가는 현상을 기대
계산식 7)
문항난이도에 의한 문항 평가 8)
문항난이도 문항평가
미만 .00 - .20
이상 미만
.20 - .40
이상 미만
.40 - .60
이상 미만
.60 - .80
이상 미만
.80 - 1.00
매우 어려운 문항 어려운 문항 중간 난이도 문항
쉬운 문항 매우 쉬운 문항
문항반응분포 4.
문항의 각 답지에 대한 반응의 분포상태를 분석함으로써 각 답지가 의도했던바의 기능 1)
이나 역할이 제구실을 하고 있는지를 알아보는 것
규준지향검사는 각 문항의 약 이상의 대부분의 학생이 정답에 반응하고 그 나머
2) 50% ,
지가 오답지에 비슷하게 분산되어야 함
목표지향평가에서는 학습과제의 초기단계에서는 학생들이 오답에 대부분 반응하고 점
3) ,
차 진행되어 학습과제에 이르면 이를수록 오답 반응을 하는 학생이 감소되어 감 선다형 검사문항을 구성하는 답지들의 유용성을 판단하는데 가장 적절한 방법 4)
예
< >
문항 1 반응수 문항 2 반응수 문항 3 반응수 답지 ① ◆
②
③
④
140 60 50 50
답지 ①
② ◆
③
④
40 80 140
40
답지 ①
②
③ ◆
④
0 40 200
60
130 300 300
→ 문항 의 경우1 : 정답에 대부분의 학생이 반응하였고 오답지에도 비교적 고르게 반응분, 포되어 있으므로 무난한 문항분포이다.
문항 의 경우2 : 정답보다 오히려 ③번문항에 많은 반응이 보이므로 제대로 정답구실을 하지 못하는 문항분포이다.
문항 의 경우3 : 문항 와는 달리 오답의 매력이 너무 적어 정답이 너무 훤히 들여다 보2 이는 문항이다 또한. ①에는 반응이 전혀 없어 이는 어떤 오답의 암시가 있음을 의미한 다.