읽기, 수학은 아동이 건강한 사회인으로 생활하기 위해 갖추어야할 기본적인 능력이자 학습의 도구로서 중요한 의미를 갖으며, 이에 따라 읽기, 수학 영역에서 아동의 학업성취 도를 평가하고 이를 통해 교육의 질을 점검·개선하기 위한 개별 국가 또는 국제 수준의 다 양한 평가 활동이 이루어지고 있다. 읽기, 수학의 학습성과를 측정하기 위해 활용되고 있 는 기존의 평가도구와 이러한 평가도구를 사용해 수집된 데이터는 국제 수준의 읽기, 수학 학습성과 지표를 개발하는데 중요한 기초자료로 활용될 수 있다. 따라서 이 절에서는 기존 에 국제적으로 활용되고 있는 읽기, 수학 영역의 학습성과 평가도구들에 대해 각 평가의
목적과 평가 대상, 방법, 내용 등에 대해 개관한다. 구체적으로 초등교육 단계에서 읽기 또 는 수학의 학습성과를 측정하는 기존 평가도구로 국제 수준의 학업성취도 비교 연구인 TIMSS, PIRLS, 특정 지역 국가들을 중심으로 운영되는 권역별 학업성취도 평가인 LLECE, SACMEQ, 민간 주도로 개발·시행되는 EGRA/EGMA, Literacy Boost, ASER, UWEZO에 대해 살펴본다.
가. TIMSS
TIMSS(the Trends in International Mathematics and Science Study)는 국제 교육성 취도 평가 협회(International Association for the Evaluation of Educational Achievement; 이하 IEA)에서 학생들의 수학·과학 성취도를 국제적으로 비교하고, 교육 맥락 변인들과 성취도 사이의 관계를 파악하기 위해 4년 주기로 시행되는 평가이다.(김수 진 외, 2013a). 이 평가의 목적은 참여국 학생들의 수학과 과학 성취도 수준 및 성취도의 변화 추이를 파악하고, 성취도에 영향을 주는 배경 변인과 성취도와의 관계 분석을 근거 로 연구 참여국의 교육정책 수립의 기초자료로 활용하는 것이다.(김수진 외, 2013a). 1995 년 처음 시행되어 4년을 주기로 평가가 시행되며, 가장 최근에 실시된 TIMSS 2011에는 초등학교 단계(4학년)의 평가에 50개국, 중학교 단계(8학년) 평가에 42개국이 참여했다.
(김수진 외, 2013a)
TIMSS의 초등학교 4학년 수학 평가틀을 살펴보면, 평가의 내용영역 측면에서는 수, 도 형과 측정, 자료 표현의 세 가지 하위요소를 평가하며 인지영역 측면에서는 알기, 적용하 기, 추론하기의 세 가지 요소를 평가한다.
나. PIRLS
국제 읽기능력 평가(Progress in International Reading Literacy Study: PIRLS)는 4학년 학생들의 읽기능력을 점검하고 측정하는 국제수준 읽기평가이다(Mullis, 2009). IEA (International Association for the Evaluation of Educational Achievement)에서는 세계 각 국가 학생들의 읽기 능력을 평가하고 이러한 능력습득과 관련된 요인을 평가하고자 PIRLS를 개발하였다(Mullis, 2009). PIRLS는 2001년에 처음 시행되어 5년 주기로 실시된 다. 2011년에는 PIRLS보다 난이도가 낮은 PIRLS를 포함하여 확장되었는데, Pre-PIRLS의 경우 기존의 Pre-PIRLS의 난이도가 높아서 보다 쉬운 읽기 평가를 필요로 하는 국가
(저개발국)를 대상으로 활용할 수 있기 위해 개발 되었다.
PIRLS는 4학년 학생을 대상으로 실시되며, 2단계 층화집락표본추출법을 이용해 표집평 가로 실시된다. PIRLS에서는 ‘명시적으로 진술된 정보 파악하기(focus on and retrieve explicitly stated information)’, ‘직접적인 추론하기(make straightforward inferences)’, ‘정 보를 해석하고 통합하기(interpret and integrate ideas and information)’, ‘내용, 언어, 텍스 트적 요소를 검토하고 평가하기(examine and evaluate content, language, and textual elements)’의 4가지 요소를 평가하며, Pre-PIRLS에서도 동일한 요소를 평가하되 다른 요 소들의 평가 비율을 낮추고 ‘명시적으로 진술된 정보 파악하기’의 평가 비율을 높였다.
다. SACMEQ
SACMEQ(Southern and Eastern Africa Consortium for Monitoring Educational Quality)은 동·남부 영어권 아프리카의 교육의 질을 측정하기 위해 설립된 컨소시엄으로 1995년에 아프리카 15개국 교육담당부처에서 지역의 교육의 질 개선에 협력하기 위하여 설립된 비영리 국제개발조직이다(Moloi, M. Q. & Chetty, M., 2010). SACMEQ에서는 1995년, 2000년, 2007년 세 차례에 걸쳐 6학년 학생들을 대상으로 평가를 실시하였으며, 최근 실시된 SACMEQ Ⅲ에는 2,800개교에서 학생 70,000명, 교사 6,000명, 학교장 2,800명 이 참여했다(Moloi, M. Q. & Chetty, M., 2010). SACMEQ은 국가별로 층화군집표집방법 에 의한 표집평가를 실시한다.
SACMEQ에서는 6학년 학생들을 대상으로 읽기(영어)와 수학 능력을 평가한다. 읽기에 서는 축어적 회상(verbatim recall), 개념의 재구성(paraphrase concept), 주제 찾기(find main idea), 추론하기(infer from text), 정보 찾기(locate information), 탐색과 처리(locate and process), 규칙 적용하기(apply rules)의 7가지 읽기 능력을 평가한다. 수학에서는 수, 측정, 공간과 자료 영역을 평가하며, 수 영역은 연산과 수직선, 제곱근, 반올림 등의 세부 내용을 포함하며, 측정은 거리, 길이, 넓이 등의 측정을 공간자료는 기하학적 도형, 도표, 표 등을 포함한다.
라. LLECE1)
LLECE(Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación)는 라틴 아메리카의 교육의 질을 평가하기 위한 네트워크로 UNESCO의 라틴아메리카와 카 리브해 지역 교육 협회에 의해 조직되었다. LLECE는 학생들의 학업성취에 대한 정보를 제공하고 학업성취와 관련된 요인을 분석할 뿐만 아니라 국가단위에서 이루어지는 측정 및 평가에 대한 지원과 조언을 제공하며 교육평가에 초점을 두고 새로운 접근방식을 서로 교환하고 논의할 수 있는 장을 형성하기 위해 조직되었다.
LLECE에서는 1997년에 라틴 아메리카 지역 13개국 약 52,000명의 3학년과 4학년 학생 을 대상으로 첫 번째 지역적 비교 및 탐색 연구(PERCE)를 시행하였다. 2006년에 시행된 두 번째 연구(SERCE)에서는 16개 국가의 100,752명의 3 학년 학생, 95,288명의 6 학년 학 생을 대상으로 학습 성취도를 평가하였다. SERCE는 PERCE에 비해 평가 영역이 확대되 어 읽기, 쓰기, 수학, 자연과학 영역에 대한 평가가 이루어졌으며, 학업성취와 관련되는 사 회 및 학교 배경요인을 조사하였다. 세 번째 연구(TERCE)는 2013년에 시행되었고 15개국 을 대상으로 SERCE와 마찬가지로 3학년과 6학년 학생들의 읽기, 쓰기, 수학, 자연과학 영 역에 대한 평가가 이루어졌다. SERCE를 기준으로 읽기, 수학의 평가 영역을 살펴보면, 읽 기에서는 일반적 읽기 과정, 특정 텍스트와 관련된 읽기 과정, 메타언어적 읽기 과정을 평 가하며, 수학에서는 수와 연산, 기하, 측정, 자료처리기술, 규칙을 평가한다.
마. EGMA/EGRA
EGMA와 EGRA는 비영리단체인 RTI international(구 Research Triangle Institute)에서 저소득 국가들을 대상으로 아동의 기초 단계의 읽기, 수학 능력을 평가하기 위해 개발되었 다. EGRA는 2006년 USAID(United States Agency for International Development), World bank의 지원 하에 많은 전문가들에 의해 개발되었으며, EGRA의 개발 목적은 학습 초기 단 계의 학생들이 읽기 능력을 얼마나 잘 습득하였는가를 체계적으로 측정할 수 있도록 함으로 1) 라틴아메리카 평가 연구소(LLECE : Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación)가 주관하는 학업성취도 비교 연구는 평가 시행 시기마다 명칭이 다르게 붙여졌음.
1997년 시행된 첫 번째 평가는 PERCE(First Regional Comparative and Explanatory Study), 2006 년 시행된 두 번째 평가는 SERCE(Second Regional Comparative and Explanatory Study), 2013년 시행된 세 번째 평가는 TERCE((Third Regional Comparative and Explanatory Study)라고 함. 이 글에서는 1∼3차 평가 모두 LLECE가 주관하는 학업성취도 비교 연구라는 의미에서 각 시기별 평 가의 명칭 대신 LLECE 라는 명칭을 사용함
써 궁극적으로는 아동의 학습 능력 향상에 기여하기 위한 것이다. RTI에서 주관하고 있는 EGMA시험은 전 세계 40개 이상의 나라에서 70개 이상의 언어로 시행되고 있다(Gove &
Wtterberg, 2011). 한편 EGMA는 EGRA개발 이후에 2008년 USAID(United States Agency for International Development)와 RTI의 계약으로 개발되었으며 기초수학능력을 평가하기 위한 구두 평가도구이다.(Ruebens, 2009). EGMA는 2009년에 케냐에서 예비연구 된 이후, 현재 1-3학년을 대상으로 전 세계 14개 국가에서 실시되고 있다.(RTI international, 2014) 각 시험의 평가 영역을 살펴보면 EGRA는 문자 인식 등 저학년에서의 문해력 획득을 위 한 기초 기능을 평가하며, 구체적으로는 알파벳 명칭 알기, 음소 인식, 친숙한 단어 읽기, 구두 읽기 유창성, 읽고 이해하기, 듣고 이해하기, 받아쓰기 능력을 평가한다(RTI international, 2009b). EGMA는 초등학교 1학년 수준의 공통적인 수학능력을 평가하는 시 험으로, 수(수 인식, 크기 비교, 수 규칙, 덧셉, 뺄셈, 곱셈, 나눗셈)와 도형에 관한 능력을 평가한다.(RTI international, 2014)
바. Literacy Boost
Literacy Boost는 아동의 독해 능력의 발달을 지원하기 위한 Save the Children의 혁신 프로그램이다(Save the Children, 2001). Literacy Boost 프로그램의 초반에서는 아동의 5 가지 주요 읽기능력에서의 강점과 약점에 주목하여 아이들의 독해 능력에 대한 정보를 제 공하기 위해 초기 평가가 이루어지고, 학년 과정 중에는 아이들의 학습 요구를 충족시키고 학생들의 능력 향상을 점검하고 규칙적인 평가를 실행하기 위해 교사를 훈련을 통해 지원 한다. 학년 말에는 종합적인 평가를 통해 아이들의 앞으로의 과정을 결정한다(Save the Children, 2001). Literacy Boost는 과테말라, 아이티, 말리, 말라위, 짐바브웨, 모잠비크, 에 티오피아, 아프가니스탄, 파키스탄, 네팔, 방글라데시, 베트남, 필리핀 등 아프리카, 아시아, 남미 지역 12개국에서 시행되었다(Save the Children, 2001).
Literacy Boost는 1-4학년의 아동을 대상으로 하며(LMTF, 2013), 알파벳 명칭 알기 (Alphabet Knowledge), 음소 인식(Phonemic Awareness), 유창성(Fluency), 어휘(Vocabulary), 이해(Comprehension) 능력을 평가한다(Save the Children, 2001).
사. ASER
ASER(Annual Status of Education Report)는 인도 Pratham(인도의 비정부조직)의 소 양(literacy) 강화 프로그램의 일환으로 개발된 평가도구로서, 2005년에 인도에서 처음 시
행되어 그 이후 매년 실시되고 있다. 파키스탄에서도 2008년 예비연구 이후 2010년부터 ASER가 시행되었다. 현재 인도에서 Pratham 내 ASER 조사를 선도하는 단위는 ASER 센터이며, 지역내 데이터 수집은 지역 조직이나 기관에서 매년 수행된다. 파키스탄 ASER 는 Idara-E-Taleem-O-Aagahi (ITA) / South Asian Forum for Education Development (SAFED) 에 의해 운영된다(Aser Centre, 2014).
ASER는 인도의 각 지역과 주의 아동 취학과 기본 학습 단계에 대한 신뢰할 수 있는 연 간 추정치를 제공하기 위해 실시되며, 5세에서 16세 아동을 대상으로 기본 읽기(reading) 와 산술(Arithmetic)을 평가한다. 평가의 난이도 수준은 가장 어려운 문항이 국가 교육과정 중 2학년 과정에 해당하는 수준이 되도록 설정되었다. 평가 영역별 세부 평가요소를 살펴 보면, 읽기 영역은 문자, 단어, 짧은 단락(1단계 지문), 긴 이야기(2단계 지문)로 구성되며, 수학은 한 자리 수 식별(1-9), 두 자리 수 식별(11-99), 두 자리 수 뺄셈, 세 자리와 한 자리 수 나눗셈으로 구성된다.
ASER는 인도의 각 지역과 주의 아동 취학과 기본 학습 단계에 대한 신뢰할 수 있는 연 간 추정치를 제공하기 위해 실시되며, 5세에서 16세 아동을 대상으로 기본 읽기(reading) 와 산술(Arithmetic)을 평가한다. 평가의 난이도 수준은 가장 어려운 문항이 국가 교육과정 중 2학년 과정에 해당하는 수준이 되도록 설정되었다. 평가 영역별 세부 평가요소를 살펴 보면, 읽기 영역은 문자, 단어, 짧은 단락(1단계 지문), 긴 이야기(2단계 지문)로 구성되며, 수학은 한 자리 수 식별(1-9), 두 자리 수 식별(11-99), 두 자리 수 뺄셈, 세 자리와 한 자리 수 나눗셈으로 구성된다.