5. 선택형 문항 제작
선택형 문항의 종류
선택형 문항은 주어진 답지 중에서 정답을 선택하는 문항으로 선택형 문 항에는 진위형, 선다형 그리고 결합형 문항이 있음
진위형은 진술문의 진위, 정오, 긍정-부정에 대한 이분적인 판단을 요구하는 형식으로, 단순 지식을 정확하게 이해하고 있는가를 효율적으로 측정하고자 하거나 2개의 반응만 가능한 경우 적합한 형식
선다형은 문두와 함께 여러 선택지를 제시한 다음 조건에 맞는 선택지를 고 르도록 하는 형식으로, 대표성이 높고, 채점의 신속성과 공정성을 기할 수 있 으며, 진단적인 기능이 있고, 융통성이 많은 형식이기 때문에 문항 형식 중 가 장 보편적으로 사용됨
결합형은 자극군과 반응군에서 서로 관련되는 것끼리 연결하도록 하는 형식 으로, 상호관계에 대한 지식을 측정하거나 동질적인 내용이 많을 때 적합
진위형
진위형 문항의 제작 원리는 다음과 같음
첫째, 질문, 즉 진술문에 중요한 내용을 포함함
중요하지 않은 내용이 답에 영향을 주지 않도록 함
질문에 중요한 내용을 포함하고 있어야 함
문항의 답을 알고있음에도 불구하고 하찮은 내용에 의하여 문항의 답을 맞히지 못하였을 때 측정의 오차는 커지고 검사의 신뢰도는 감소하게 됨
둘째, 복합적 학습내용을 측정하기 위하여 기초적 자료에 근거한 문항을 작성
진위형 문항으로 도표, 지도, 그림 등의 해석에 근거한 복합적 지식을 측정하는 경 향이 있음
다양한 정보에 의한 복합적 내용을 해석, 분석, 비판하는 능력을 측정하기 위하여 도표나 그림 등을 이용하는 것이 바람직함
진위형
셋째, 일반화되지 않은 주장이나 이론의 옳고 그름을 묻지 않아야 함
일반화되지 않은 주장이나 이론은 정답에 대한 논란때문에 질문의 대상이 될 수 없음
넷째, 하나의 질문에 하나의 내용만 포함되도록 함
질문에 여러가지 내용이 포함되었을 때 능력 측정의 어려움이 있음
다섯째, 부정문의 사용을 삼가, 이중 부정은 더욱 삼가함
부정문이 사용된 질문이 때로는 긍정문으로 인식되어 실수로 문항의 답을 맞히지 못하는 경우가 생김
여섯째, 교과서에 있는 똑같은 문장으로 질문하지 않아야 함
교과서에 있는 문장을 그대로 진술하면 피험자들이 기억력에 의하여 문항을 맞힐 확률이 높을 뿐만 아니라 깊게 생각하지 않는 경향이 있음
일곱째, 가능한 간단명료하게 단문으로 질문
질문은 간단명료, 문어체보다는 구어체가 더 간단함
진위형
여덟째, 답의 단서가 되는 부사어는 사용하지 않음
‘절대(absolutely), 항상(always)’, 모두(all), 전혀(never), 오직(only)’등의 부사어 는 틀린 답의 단서가 됨
아홉째, O가 정답인 문항과 X가 정답인 문항의 비율이 한편으로 치우치지 게 함
일반적으로 답이 O인 문항과 X인 문항의 비율을 동일하지는 않지만 유사하 게 유지해야 함
열번째, 정답의 유형이 고정되지 않고 무선적이 되게 함
진위형의 장, 단점
장점
첫째, 문항 제작이 용이
둘째, 채점의 객관성이 높임
셋째, 정해진 검사시간 내 다수의 문항으로 많은 교과내용을 측정할 수 있음
단점
첫째, 추측에 의해 문항의 답을 맞힐 수 있음
둘째, 고등정신능력보다는 단순정신능력을 측정할 가능성이 높음
셋째, 학습동기가 감소함
넷째, 문항의 변별력이 감소할 수 있음
다섯째, 곁눈질이 용이함
진위형의 예시
[예제 1] 바이러스에 감염된 파일은 백신 프로그램에 의해 모두 완벽하게 복구된다.( )
[예제 2] 도움말이란 프로그램의 사용방법 및 문제점을 해결하는 방법을 기록한 지침서이다. ( )
[예제 3] 프로그램을 사용하다가 도움말을 불러내려면 F1을 누르면 된다.
( )
[예제 4] 윈도우즈에서 프로그램을 삭제한 경우에도 바로가기 아이콘이 있 으면 프로그램이 실행된다. ( )
[예제 5] 글을 이용하여 숙제를 해야 하는데 프로그램이 설치되어 있지 않
으면 친구에게 CD를 빌려서 설치하면 된다. ( )
진위형의 예시
선다형
선다형 문항은 선택형 문항 유형 중 가장 많이 쓰이는 문항으로 두 개 이 상의 답지가 부여되어 그 중 맞는 답지나 혹은 가장 알맞은 답지를 선택하 는 문항임
다수의 피험자들에게 대한 검사의 효율성을 높이고 과정의 정확성을 기하 기 위하여 Kelly가 1914년 고안함
매우 쉬운 문항에서부터 어려운 문항을 제작할 수 있어 학업성취도검사에 흔히 사용됨
선다형 문항은 옳은 답을 선택하는 정답형 문항(absolutely-correct type item)과 여러 답지 중 가장 옳은 답을 선택하는 최선답형 문항(best
answer type item)이 있음
선다형 문항의 제작원리
단순한 지식이 아니라 고차적인 학습성과를 잴 수 있도록 문항을 출제
용어나 개념의 정의를 알고 있는가를 재려는 문항에서는 용어 또는 개념을 문두 로 하고 설명을 선택지로 해야 함
구체적 한정사(specific determiner)를 사용하지 않아야 함.
예 : ‘항상’, ‘결코‘, ‘대체로'등의 사용 자제
선택지가 부분적으로 옳은 내용을 포함할 경우 최선답을 선택해야 한다는 사실을 명기해야 함
문두나 선택지를 글로 표현하기 어려울 때는 그림, 도표, 지도 등을 사용해도 무방
문항의 곤란도를 조정하려면 문두를 복잡하게 만들거나, 선택지의 내용과 표현을 비슷하게 해야 함
정답지는 어떤 경우에도 반드시 정답이 되도록 작성
선다형 문항의 제작원리
오답지는 매력도가 높게 작성해야 함. 오답지의 매력도는 높이는 방법은 다음과 같음.
학생들이 평소에 흔히 범하는 오류를 이용해서 오답지를 만듬
언뜻 보아 사실처럼 보이는 교재의 용어나 표현을 이용
학생들이 정확하게 이해하지 못하거나 부주의하기 쉬운 내용을 오답지로 사 용
정답지의 내용과 유사한 내용을 오답지에 사용
오답지의 길이, 어휘, 구문, 수준이 정답지와 비슷하도록 진술
그 자체의 내용은 옳지만 문두에 관련되지 않은 내용을 오답지로 사용
학생들이 의미를 정확하게 모르면서도 흔히 사용하는 친숙한 용어와 표현을 오답지에 포함
선다형 문항의 제작원리
선택지를 간결하게 표현
선택지마다 반복되는 표현은 문두에 포함시킴
선택지의 수를 적절하게 해야 함
선택지의 의미나 범위가 중복되지 않도록 해야 함
선다형 문항의 예시
선다형 문항의 예시
선다형 문항의 장, 단점
장점
출제범위에서 많은 문항을 골고루 출제할 수 있어 대표성이 높음
단순 사실의 기억 여부를 평가할 수 있을 뿐만 아니라 제대로 작성하기만 하 면 추리력, 종합력, 판단력과 같은 고차적 사고능력을 요구하는 학습성과도 평가할 수 있는 융통성이 있음
진위형 문항에 비해 추측요인이 적게 작용하며, 추측요인이 작용할 개연성이 높을 때는 선택지의 수를 늘려 추측확률을 낮출 수 있음
오답지 반응을 분석하여 잘못 이해하고 있는 부분을 구체적으로 밝힐 수 있 는 진단적인 자료를 확보할 수 있음
문두와 선택지를 함께 제시하므로 출제의도를 명확하게 전달할 수 있음
신속하고 객관적인 채점, 특히 컴퓨터를 이용한 채점이 가능
선택지를 부분적으로 수정하면 문항의 곤란도를 조정할 수 있음
선다형 문항의 장, 단점
단점
문항을 작성할 때 문두와 선택지(특히, 매력도가 높고 능률적인 선택지)를 만 들기가 어려움
종합이나 평가와 같은 고등정신능력을 평가하기가 비교적 어렵기 때문에 단 순하고 사실적인 지식을 평가하는 문항이 주로 출제될 개연성이 있음
정답을 모르면서도 추측이나 시험 치는 요령으로 정답을 맞힐 소지가 있음
선다형 문항에 답하려면 문두와 선택지를 일일이 읽어야 하므로 다른 선택형 문항에 비해 시간이 많이 소요
결합형
자극군(stimuli)인 전제(premises)와 반응군(responses)인 선택지에서 서로 관계되 는 것을 찾아 연결하도록 하는 문항 형식
배합형, 연결형이라고 부르기도 함
일반적으로 자극군을 왼쪽에 배치하고 반응군을 오른쪽에 배치함
종류
복합결합형(compound matching variety)
관계분석형(relation analysis variety)
분류결합형(classification matching variety)
양단분류형(both-neither classification variety)
공변관계형(variation relationship variety)
수량비교형(quantity comparison variety)
결합형 문항의 장, 단점
장점
넓은 출제범위에서 많은 문항을 출제할 수 있으므로 대표성이 높음
자극군이 반응군의 선택지들을 공동으로 사용하므로 문항 작성이 용이
문항을 읽고 답하는 데 시간이 적게 걸림
채점이 빠르고 채점의 객관도가 높음
자극군과 반응군의 항목을 서로 결합하는 형태를 다양하게 변화시킬 수 있기 때문에 복잡한 내용을 서로 관련지어 학습했는가를 평가할 수 있음
단점
고차적인 학습능력을 평가할 수 있는 문항 제작이 어려움
동질적인 자극군과 반응군을 만들기가 어려움
자극군의 일부 항목과 반응군의 항목을 결합하고 나면 나머지 항목들을 추측 으로 결합시킬 확률이 점진적으로 높아져 추측의 영향을 통제하기가 어려움
결합형 문항의 작성 지침
자극군과 반응군을 동질적인 항목으로 구성
자극군과 반응군의 항목을 짧게 진술하며, 자극군보다 반응군의 항목을 더 짧게 진술하는 것이 바람직함
지시문에는 자극군과 반응군을 연결하는 기준과 답을 표시하는 방법을 명시
자극군보다 반응군의 항목수가 더 많게 작성
자극군과 반응군의 항목수가 같을 경우, 자극군과 반응군에 있는 마지막 항목은 자동적으로 결합 되므로 추측을 통제할 수 없음
자극군의 항목수는 5~7개가 되도록 함
자극군 또는 반응군의 항목은 논리적, 시간적, 양적 공간적 순서에 따라 체계적으로 배열
자극군과 반응군의 항목은 시험지의 동일 페이지에 배치
자극군 항목을 문두로 하며 반응군의 답을 요구하는 단답형이나 완성형 문항으로 작성하여 문 제점이 있는가를 검토