Ⅲ. 수학·읽기 영역의 학습성과 명세화
1. 수학
1차년도인 이번 연구의 목적을 구체적으로 진술하면 다음과 같다.
첫째, 학습성과 지표의 개념과 개발 절차를 구체화한다.
둘째, 국제 수준에서 공통적으로 설정할 수 있는 수학, 읽기 영역의 학습성과를 구체화한다.
셋째, 국제적으로 비교 가능한 수학, 읽기 영역의 학습성과 평가 방안을 탐색한다.
2. 연구 내용
3)1차년도인 이번 연구에서 수행하게 될 구체적인 연구 내용은 다음과 같다.
가. 학습성과 지표 개발의 배경 및 관련 동향 분석
국제 교육개발협력의 현황과 쟁점, LMTF 1단계 활동의 주요 내용과 성과 등 국제 학습 성과 지표 개발의 배경 및 관련 논의를 검토하고 학습성과 지표 개발의 목적과 방향을 명 확히 한다.
∘ EFA, MDG 등 국제 교육개발협력 동향 관련 문헌 분석
∘ LMTF 구성 목적 및 주요 활동, 2014～2015년 2단계 활동 계획 관련 문헌 분석
나. 학습성과 지표의 개념 및 개발 방안 고찰
지표의 개념 및 준거, 개발 방법과 관련된 국내외 문헌 및 선행연구를 고찰하고, 학습성 과 지표의 개발 목적을 고려해 학습성과 지표 개념을 정의하고 개발 방안을 마련한다.
∘ 지표의 개념 및 조건, 개발 방법에 대한 이론적 고찰
∘ 학습성과 지표의 개념 및 개발 방안 수립
다. 수학·읽기 영역의 학습성과 명세화
수학, 읽기 능력의 발달에 대한 이론적 고찰, 지리적· 경제적 특성을 달리하는 다양한 국 가들의 교육과정 분석, 기존에 활용되고 있는 국제 및 권역별 평가도구의 평가 내용 분석 을 통해 국제 수준에서 공통적으로 강조되는 초등교육 단계의 수학, 읽기 영역의 학습성과 를 명세화한다.
∘수학, 읽기 능력의 발달에 대한 이론적 고찰
∘수학, 읽기 영역의 국내외 교육과정 분석
∘수학, 읽기 영역의 국제 및 권역별 평가도구 분석
∘수학·읽기 영역의 학습성과 명세화
3) 수학, 읽기 영역 지표 개발 실무그룹 구성이 2014년 3월에 완료되고 이후 LMTF 사무국과의 협의를 통 해 지표 개발을 위한 과제 진행 방향 및 방법이 구체화됨에 따라 본 연구의 실행계획서 단계에서 설정되 었던 연구내용 중 일부가 조정·보완되었다.
라. 국제 학습성과 평가 방안 탐색
기존의 국제 및 권역별 평가도구들이 본 연구에서 도출된 수학, 읽기 영역의 국제 공통 학습성과를 적절히 평가하고 있는가를 검토하고, 서로 다른 평가도구들을 활용해 측정되는 각국의 학업성취도 평가 결과를 국제적으로 일관되게 해석, 보고할 수 있도록 하는 국제 학습성과 평가 방안을 탐색한다.
∘수학, 읽기 영역의 국제 및 권역별 학업성취도 평가 실시 현황 분석
∘수학, 읽기 영역의 학습성과 국제 비교를 위한 평가도구 연계 방안 탐색
3. 연구 방법
가. 문헌 분석
∘ 목적: 학습성과 지표 개발 관련 문헌 및 선행연구 검토
∘ 내용: 지표의 개념 및 개발 방안에 대한 이론적 검토 수학, 읽기 능력 발달에 대한 이론적 검토 국내외 수학, 읽기 교육과정(초등학교) 분석
수학, 읽기 능력을 평가하는 기존의 국제 및 권역별 평가도구 분석 검사 연계에 관한 이론 및 선행연구 분석
LMTF 보고서, MDG, EFA 등 국제 교육개발협력 동향 자료 검토
∘ 시기: 2～7월
나. 전문가 협의회
∘ 수학, 읽기 영역의 학습성과 내용 영역 및 요소 추출을 위한 전문가 협의회 - 대상: 수학, 읽기 교육 전문가
- 내용: 수학, 읽기 능력 발달과 학습 관련성, 국내외 교육과정 분석 결과 검토, 국제 및 권역별 평가도구 분석 결과 검토
- 시기: 3∼7월
∘국제 학습성과 평가 방안 탐색을 위한 전문가 협의회 - 대상: 교육평가 전문가
- 내용: 검사 연계의 개념 및 조건 검토
국제 및 권역별 평가도구의 척도 연계 방안 검토 - 시기: 4∼8월
다. 국제 회의
∘읽기 영역 지표 개발 그룹 회의
- 목적: 읽기 영역 지표 개발 방안 탐색을 위한 실무그룹 협의 - 시기: 3월 30일∼4월 1일(캐나다)
∘수학 영역 지표 개발 그룹 회의4)
- 목적: 수학 영역 지표 개발 방안 탐색을 위한 실무그룹 협의 - 회의 일자 및 주요 협의 내용
일자 회의내용
4월 3일 지표 개발 그룹의 목표, 회의 진행 방법 협의 4월 10일 초등 수학의 학습성과 영역 정의
4월 17일 학습성과 영역의 세부 요소 정의
4월 24일 읽기 지표 개발 그룹 협의사항 검토 및 수학 지표와의 조율 방안 논의 4월 30일 주요 협의 사항에 대한 최종 의견 수렴
5월 8일 수학 학습성과 지표 개발을 위한 WGNI 권고사항 초안 검토 9월 4일 Post-2015 교육개발의제 설정을 위한 수학 학습성과 측정 방안 10월 2일 LMTF 파트너들의 활동성과 및 쟁점 공유
4) 수학 영역 지표 개발 그룹 회의는 7번의 온라인회의(webinar)와 1번의 전화회의로 진행되었다.
라. 수학 영역 성취수준 기술문 개발을 위한 전문가 패널 운영5)
∘목적: 성취수준에 대한 일반적 정의 및 성취수준 기술문 시안 개발
∘대상: 수학 교육 전문가 5명
※ 개발도상국 교육 원조 경험자 2명, TIMSS 연구 참여 경험자 2명
∘방법: 3차에 걸친 패널 협의를 통해 성취수준 기술문 시안 개발 및 합의
∘일정 및 주요 협의 내용
구분 일자 협의내용
1차 회의 8월 21일 전문가별 성취수준 기술문 작성 및 후 논의, 수정 2차 회의 8월 28일 1차 수정된 성취수준에 대한 논의 및 수정 3차 회의 9월 4일 2차 수정된 성취수준에 대한 논의 및 초안 확정
마. 세미나 개최
∘목적: 국제 학습성과 지표 개발을 위한 국제 협력 연구의 추진 현황 및 쟁점 논의
∘대상: 교육 관련 연구자, 교사, 국제교육개발협력기관 관계자 등
∘내용: 국제 학습성과 지표 개발의 의의 및 현황 수학, 읽기 영역의 학습성과 지표 개발 방안
학습성과 지표의 국제적 비교 가능성 제고를 위한 검사 연계 방안
∘시기: 9월 19일
바. 전문가 의견 조사
∘목적: 수학 영역 학습성과 명세화 시안에 대한 검토
∘대상: 수학 지표 개발 그룹(WGNI) 구성원, LMTF 구성원 중 수학 영역 관련 전문가
∘절차
- 1단계: 학습성과 명세화 시안에 대한 검토의견서를 검토자들에게 e-mail로 송부 - 2단계: 수집된 검토 의견을 분석하여 KICE 연구진이 학습성과 명세화 시안을 수정
∘시기: 10월
5) 성취수준기술문 개발은 수학 영역에 한해 진행되었다. 읽기 영역은 언어, 문자의 국가 간 다양성으로
Ⅱ. 학습성과 지표의 개념 및 개발 방안 고찰
1. 개념 및 기능 2. 선택의 준거
3. 개발 방법론 및 절차
1. 개념 및 기능
가. 개념
지표는 ‘방향이나 목적, 기준 따위를 나타내는 표지’(표준국어대사전, http://stdweb2.
korean.go.kr/search/List_dic.jsp, 2014, 11, 17 검색) 라는 매우 간단한 사전적 의미를 지니 고 있다. 하지만, 지표 개발 관련 연구들에서는 지표 개발의 목적이나 범위 혹은 수준 등에 따라 다양하게 지표를 정의하고 있다. 이처럼 다양한 지표의 정의 방식을, 김영화 외(1997) 는 두 가지의 관점으로 대별하여 다음과 같이 정의하였다.
지표는 사회나 교육의 합의된 가치 및 목적과 관련하여 이의 현황과 발전 추 세를 나타내는 규범적 성격을 지닌 증거라는 협의의 관점과, 규범적인 상태를 포함하여 사회나 교육의 현황 또는 상태를 드러내 주는 기술치라는 광의의 관 점이 있다(김영화 외, 1997, p.11).
예컨대, 사회지표의 창시자라고 불리는 Bauer(1966)는 지표를 ‘우리의 가치와 목표를 지 향하여 우리가 어디에 서 있으며, 어디로 가고 있는가를 평가할 수 있는 통계, 통계계열 및 다른 형태의 모든 증거’라고 정의하여 지표의 규범적 성격을 강조하였다(엄문영 외, 2013, 재인용). Clemmer et al.(1973)도 지표란 시간상의 어떤 특정한 시점에서, 목적 및 목표를 향한 발전상태의 분석을 위해 유용한 증거를 제공하는 중요한 조건 또는 변수의 술어 (descriptor)라고 정의하였고(김창환 외, 2011, 재인용), Moser(1973)도 사회지표를 ‘사회 여 건의 상태와 변동을 요약함으로써 현존하거나 파생되는 중요한 사회적 문제를 지적하고 사회정책과 프로그램의 성과를 전달하는 것’이라고 정의함으로써(엄문영 외, 2013, 재인용) 양측 모두 지표의 규범적 성격을 강조한 듯 보인다.
하지만, OECD(1982)는 이전의 지표에 대한 정의와는 다른 입장을 보였다. 즉, 지표를
‘여러 사회적 관심과 관련된 사실들과 그 변화를 보고·예측하는 것’, ‘주요 관심 영역의 사 회적 수준과 변화에 관련된 직접적이고 유효한 통계적 척도’라고 하여 규범적이고 기술적 인 성격 모두를 포괄하는 개념으로 정의한 것이다. 이와 같은 정의는 지표를 개념화하는 두 가지 관점이 서로 배타적이지 않으며, 오히려 협의의 규범적 성격이 광의의 기술적 성 격에 포함되는 형태를 띠게 된다는 류방란 외(2006)의 주장을 잘 드러내고 있다.
김해동 외(2001)도 이상적인 지표는 사회가 요구하는 가치에 대한 판단을 가능케 하는 규범적 성격의 지표와 사회의 현재 상태를 정확하게 측정·보고하여 주는 기술적 성격을 가 진 지표를 적절하게 조화시킬 수 있어야 한다고 보았다.
이 연구에서도 학습성과 지표가 바람직한 학습성과 목표와 그 달성 정도를 보여줄 수 있어야 하는 동시에 학습성과의 실태와 변화정도를 요약적인 정보를 형태로 보여주는 기 술적 수치로 제공할 수 있어야 한다는 점에서 지표를 규범적 성격과 기술적 성격을 모두 포함하는 광의의 의미로 사용하고자 한다.
일반적으로 학습성과란 성취도, 교육 이수율, 사회·경제적 영향 등 학습을 통해 얻을 수 있는 장·단기적인 성과 모두를 생각할 수 있으며, 국제 수준의 교육지표 사업이나 연구 등 에서도 교육의 성과 혹은 산출 지표를 이러한 광의의 의미로 사용하고 있다. 예를 들어 OECD 교육지표에서는 교육의 효과를 중등교육 이수, 인지적인 성취 및 그 외의 평가 결 과, 중등교육 이수 이후의 활동의 세 영역으로 구분하고 각 영역에서의 지표 개발을 추진
일반적으로 학습성과란 성취도, 교육 이수율, 사회·경제적 영향 등 학습을 통해 얻을 수 있는 장·단기적인 성과 모두를 생각할 수 있으며, 국제 수준의 교육지표 사업이나 연구 등 에서도 교육의 성과 혹은 산출 지표를 이러한 광의의 의미로 사용하고 있다. 예를 들어 OECD 교육지표에서는 교육의 효과를 중등교육 이수, 인지적인 성취 및 그 외의 평가 결 과, 중등교육 이수 이후의 활동의 세 영역으로 구분하고 각 영역에서의 지표 개발을 추진