EAP-ECDS(East Asia Pacific-Early Childhood Development Scales)

가. 개발 배경

EAP-ECDS(East Asia Pacific-Early Childhood Development Scales)는 만 3 세~만 5세를 대상으로 하는 발달측정도구로, UNICEF와 Open Society Foundation의 후원을 받은 ARNEC(Asia-Pacific Regional Network for Early Childhood)이 주관하고 홍콩대학교 교육학부가 실제적으로 수행하는 프로젝트

를 통하여 개발되었다(Sun & Becher, 2014).

2002년에 UNICEF가 미국 콜롬비아대학교와 파트너십을 맺으며 ELDS(Early Learning and Developmental Standards)을 개발한 것이 본 도구의 시초라 할 수 있다. EAP-ECDS는 2009년까지 49개 국가가 ELDS를 각각 국가의 서로 다른 문화에 따라 적용하였을 뿐 아니라, 라오스의 ‘학교준비도 역량’, 캄보디아의 ‘발 달평가시험’, 베트남 ‘영유아발달 및 학습 체크리스트’의 개발에 직접적인 영향 을 미쳤다(Rao, et. al, 2015).

본 도구개발은 7개국(캄보디아, 라오스, 몽골, 필리핀, 태국, 바누아투, 베트남) 을 대상으로 하였으며, 홍콩대학교 교육학부는 기존에 개발한 HKECDS(Hong Kong Early Child Development Scale)를 토대로 EAP-ECDS을 개발하였다(Rao, et. al, 2015).

나. 개발 및 타당화 과정

EAP-ECDS의 개발은 총 3단계로 추진되었다(Rao, et. al, 2015). 1단계는 2010 년 후반에 시작되어 문헌검토로 진행되었다. 각국의 항목들을 합쳐서 재코딩한 다음, 전문가에게 자문을 구해 검사지를 완성하였다. 2단계에서는 예비조사 연 구를 수행되었는데 다양한 문화적 특징을 포괄하기 위해 몽골, 피지, 중국을 선 정하였다. 이후, 수정보완 사항 반영 및 타당화 검토 후 2013년 초에 최종검사 지를 개발하였다. 3단계에서는 2013년 6월부터 12월까지 6개 국가의 만3-5세 아 동을 대상으로 표본을 수집하였다.

1) 1단계

검사지를 작성하기 위해 7개 국가에서 각각 정한 영유아발달 및 학습 기준을 파악하였다.

<표 Ⅲ-3-1> EAP-ECDS의 참여국가별 발달영역 Asia-Pacific Early Child Development Scales (EAP-ECDS), UNICEF.

각국의 발달영역을 파악한 후, 다음과 같은 과정으로 검사지가 개발되었다. (Health, Hygiene and Safety), 사회정서발달(Socio-Emotional Development)로 구성되었다. 구체적인 문항 예시는 다음 표에 제시되어 있다.

(표 Ⅲ-3-2 계속)

국 가 내 용

점수 체계

머리 그리고/혹은 몸통에 추가로 한 가지 특징이 있다.

□ 0 □ 1

팔 그리고/혹은 다리를 알아볼 수 있다.

□ 0 □ 1

손 그리고/혹은 발을 알아볼 수 있다.

□ 0 □ 1

얼굴에 한 가지 알아볼 수 있는 특징이 있다 (눈, 입, 코, 귀).

□ 0 □ 1

얼굴에 알아볼 수 있는 특징이 하나 이상 추가적으로 있다 (눈, 입, 코, 귀).

□ 0 □ 1

자료: Sun, J. & Becher, Y. (2014). Early Childhood Development in the East Asia Pacific:

Development & Findings from the East Asia Pacific–Early Child Development Scales (EAP-ECDS), p. 12.

이러한 과정을 거쳐, 홍콩대학팀은 참여국 전문가로 구성된 워크숍에서 받은 피드백을 토대로 문항, 점수 체계 및 매뉴얼을 수정 및 개발하였다. 마지막으로 전문가들이 방법의 적절성을 검토하고 일부 수정대안을 제시하며 검사지 초안 을 완성하였다.

2) 2단계

검사지 완성 후, 예비조사 연구를 통해 범국가적으로 사용하기 위한 타당성 을 검증하였다. 대상 국가에 검사지 초안을 발송하여 번역 및 검토를 하여 현장 조사를 한 다음, 수정을 거듭했다. 이후, 대상 국가 중 다양한 문화권을 가지고 있다고 판단되는 세 국가, 몽골, 피지, 중국을 선정하여 시범연구를 시행하였다.

현장 조사 후 몇 가지의 수정 제안사항은 다음과 같다:

 아동에게 더 친숙한 자료를 이용할 것

 아동이 이해할 수 있는 언어를 사용할 것

 정해진 표준 지침대로 할 것

 아동들이 응답하는 방법을 여러 가지로 인식할 것: 꼭 말로 해야 할 필요 는 없으며 행동을 인식하는 방법 역시 고려할 것

 아동과 검사자의 래포 형성을 위해 노력할 것

예비조사 연구는 같이 진행되었다. 대상 국가에 검사지 패키지 전달 -> 몽골, 피지에 검사 방법 및 매뉴얼 전달 -> 몽골, 피지에서 검사 실시 -> 중국에서의 자료 수집 준비 및 몽골, 피지 자료 입력 -> 중국에서의 자료 수집 및 현장 지 원 -> 몽골, 피지 자료 분석 및 보고서 작성 순으로 이루어졌다.

각 국의 표본 수는 각각 120명이었으며 성비를 약 5대 5로 맞추어 진행하였으 며, 검사 소요시간은 몽골이 약 45분, 피지는 약 40분, 그리고 중국은 약 80분으 로 나타났다. 본 검사지의 신뢰도는 Cronbach's alpha가 .70 이상인 것으로 확인 되었고, 타당도는 내용타당도인 전문가 검토를 거쳤다. 또한, 연령별 타당도는 연령이 높은 아동이 낮은 아동에 비해 더 유의한 것으로 나타났다. 문항 적합도 는 각 문화의 차이를 잘 반영하는가, 문항 변별도, 문항 유용도를 검증하였다.

먼저 Model Selection(모델 선정) 과정에서 문항반응이론(Item Response Theory)을 측정하였다. 문항반응이론을 통해 피검사자의 능력이나 심리적 특성 과 같은 ‘잠재적 특성’을 측정하고 문항이 이원, 다원화되는지 확인하고자 하였 다. 1-모수 로지스틱 모형(Rasch model), 2-모수 로지스틱 잠재 특성 모형 (two-parameter logistic latent trait model), 그리고 Birnbaum's three-parameter model을 검토한 결과, 2-모수 로지스틱 잠재 특성 모형이 가장 적합한 것으로 나타났다(AIC=2689.19, LRT=119.45, p<0.001) (Rao, 2012).

자료: Rao, N. (2012). The development and validation of contextually relevant scales to assess and monitor child development and learning in the East Asia Pacific Region.

p. 49.

[그림 Ⅲ-3-1] 문항특성곡선(Item Characteristic Curve)

또한 문항곡선의 특성을 분석하여 각 검사 문항에 대한 정답 확률과 능력 척 도 간의 관계를 살펴보았는데, 그래프와 같이 기울기가 높을수록 그 문항은 능 력의 상하집단을 더 잘 변별하는 것으로 나타났다. 이 곡선의 문항 난이도와 문 항변별도는 난이도를 의미하는 가로축, 추측도를 의미하는 세로축으로 파악할 수 있다. 예비조사 연구 결과, 본 검사지는 총 100문항에서 85문항으로 선별되 었으며, 자세한 항목은 다음과 같다.

<표 Ⅲ-3-3> EAP-CDCS 영역별 최종 문항 수

영 역 문항 수

1. 학습접근방법 7문항

2. 인지 발달 21문항

3. Cultural Knowledge and Participation 10문항 4. Language and Emergent Literacy 16문항

5. 운동 발달 7문항

6. 건강, 위생 및 안전 9문항

7. 사회-정서 발달 15문항

총 계 85문항

자료: Sun. J., & Becher, Y. (2014). Early Childhood Development in the East Asia Pacific:

Development & Findings from the East Asia Pacific–Early Child Development Scales (EAP-ECDS). (20 p.) “The Revised Scale after Phase II”

이러한 결과를 바탕으로 예비조사 연구의 몇 가지 제한점이 발견되었다. 먼 저 심리측정의 문제로, 수집할 수 있는 자료의 한계, 요인 분석의 어려움과 신 뢰도, 소요시간 관리, 그리고 문화적으로 더 적절한 문항을 개발해야 한다는 지 적이 있었다. 또한, 아동들이 검사과정 도중 힘들어한다는 이에 아동이 피곤해 하는 경우 검사 중간에 나갈 수 있게 하자는 제안이 있었다. 더불어 검사 시 검 사자와 아동이 매뉴얼 이상의 내용을 하는 경우 전체 검사시간에 지장을 준다 는 점이 지적되었는데 아동이 검사에 보다 집중할 수 있도록 검사자가 되도록 필요한 말만 하도록 권장되었다.

마지막으로 검사자가 의도치 않게 기록지를 아동에게 노출하여 아동을 불안 하게 하는 상황, 아동이 의욕적으로 검사에 참여하도록 하는 방법 역시 논의되 었다. 이에 아동에게 칭찬하는 표현을 많이 활용하되, 물질적 제공은 금지하는 것으로 논의되었다.

3) 3단계

가) 3단계 연구과정

2단계 예비조사 연구 결과를 바탕으로 3단계에서는 1,2단계 참여국가 중 일부 가 중도포기 혹은 새로 참여하면서 최종 6개 국가(캄보디아, 중국, 몽골, 파푸아 뉴기니, 동티모르, 바누아투)에서 검사도구의 타당성을 검증하였다. 2013년 6월 부터 12월까지 표본 수집이 진행되었고 표본은 거주지역(도시, 도서·산간 지역), 성별, 영유아기관 이용 유무를 고려하여 각국마다 900~1,803명을 선별하였다.

EAP-ECDS 지침 매뉴얼, 채점표, 부모설문지는 각국의 언어로 번역되었다. 부모 설문지는 사회인구학적 요인을 조사하기 위해 배부되었으며, 가족구성원, 가족 자산, 가족 내 학습 지원자 등을 조사하였다. 또한, 아동의 초기학습 및 발달, 건강 및 습관 등을 파악하고자 하였다. 부모설문지의 아동에 대한 조사내용은

<표 Ⅲ-3-4>와 같다.

<표 Ⅲ-3-4> AP-CDCS 부모설문지 영역별 구성

영역 능력 수준

인지 발달 새로운 내용을 학습하고 문제를 해결할 수 있는가 사회정서 발달 타인에 대한 배려심 및 감정조절과 같은 사회적 능력

을 보여주는가

운동 발달 달리기, 제자리뛰기가 가능한가

젓가락, 숟가락/연필/펜을 쥘 수 있는가 언어 및 발현적 문해 언어 능력

건강, 위생 및 안전

위생 습관이 잡혀있는가(예-혼자서 손을 씻는 것) 안전 규칙을 준수하는가(예-뜨겁거나 위험한 것은 만 지지 않는 것)

문화적 지식 및 참여 지역사회의 중요한 행사에 참여하는가(축제 포함) 학습접근방법 새로운 일에 집중할 수 있는가(TV 시청 제외)

자료: Sun. J., & Becher, Y. (2014). Early Childhood Development in the East Asia Pacific:

Development & Findings from the East Asia Pacific–Early Child Development Scales (EAP-ECDS). (41 p.) “Items for parents' rating of children's competence”

아동용 설문지는 각국의 문화 차이를 고려하여 만들어진 문항이 제공되었고 아 래 예시와 같다. 아래는 17번 문항으로, 그림에 맞는 계절을 맞추는 내용이다. 중국, 바누아투, 파푸아뉴기니가 여름, 겨울을 나타내는 그림을 보여주지만 문화권 특성 에 맞춘 의복, 소품을 제공함으로써 아동들이 쉽게 이해할 수 있도록 구성되었다.

자료: Sun. J., & Becher, Y. (2014).. Early Childhood Development in the East Asia Pacific:

Development & Findings from the East Asia Pacific–Early Child Development Scales (EAP-ECDS). (25 p.) “Country adaptations: Item 17- Predicts season or weather”

[그림 Ⅲ-3-2] 동일 문항에 대한 문화적 차이

나) 3차 주요결과

본 척도는 내적합치도 Cronbach's alpha(0.74~0.95)와 내용타당도를 확인하여 타당도를 검증하였고, 각 영역과 그룹을 비교하기 위해 MANOVA로 3(연령)×2 (성별)×2(지역)로 분석하였다. 아동검사 결과와 부모 평가는 일관성이 있는 것으 로 나타났으며 문항 분석은 예비조사 연구와 마찬가지로 적합도, 문항변별 기능 분석, 문항정보 곡선, 영역별 검사정보 곡선(test information function curves)을 확인하였다. 상관관계는 0.14~0.47(p<.001) 수준으로 나타났으며, 영유아기관 이 용 유무, 가구소득, 모 학력, 성별, 그리고 연령에 따라 차이를 보였다(P<0.001).

특히, 영유아기관 등원유무(6.52)와 연령(12..28)은 다른 영역에 비해 설명력이 높 은 것으로 나타났다(Rao, et al, 2015).

여기서 주목할 부분은 연령, 성별, 지역별 차이이다. 아래는 국가별 EAP-ECDS 점수를 연령별로 나타낸 그래프이다. 6개 국가 모두 연령에 비례하

여기서 주목할 부분은 연령, 성별, 지역별 차이이다. 아래는 국가별 EAP-ECDS 점수를 연령별로 나타낸 그래프이다. 6개 국가 모두 연령에 비례하