타당도 및 신뢰도 검증 - I I I .연구의 절차 및 방법 - 전문대학생의 학교만족도 측정도구 개발

I I I .연구의 절차 및 방법

3. 타당도 및 신뢰도 검증

가.예비조사 실시 및 분석

전문대학생의 학교만족도 측정도구의 타당도 및 신뢰도 검증을 위해 예비조사를 통해 문항분석 및 양호도 검증 등을 실시하였다.이를 위해 전문대학이 소재한 지역에 따라 대 도시와 중소도시로 구분하여 임의표집을 통하여 추출된 전문대학 4개교 1학년∼3학년 재 학생 480명을 대상으로 실시하였다.예비조사를 위한 표본 수 설정에 있어서는 학자별로 다양한 견해가 있으며,일반적으로는 300∼400명까지 심리측정학자의 견해에 따라 다양하 게 나타나고 있는데(탁진국,1996;Crocker& Aligina,1986;Gable& Wolf,1993),예비조 사에서는 구인타당도 검증을 위하여 요인분석(factoranalysis)을 실시하기 때문에,요인분 석이 표본 수에 민감하다는 점을 고려하여 표본수를 결정하였다.예비조사 기간은 2013년 11월 4일부터 11월 5일까지 이틀 동안 진행되었으며,해당학과의 전공교수를 통하여 자료 수집을 부탁하였다.수집된 480명의 자료 가운데 불성실하게 응답하였거나 일반적 사항에 응답하지 않은 19명의 자료를 제외한 461명의 자료를 분석에 활용하였다.이때,예비조사 분석 대상자의 특성은 성별로는 남자(45.6%),여자(54.4),학년으로는 1학년(54.2%),2학년 (34.9%),3학년(10.8%),계열별로는 인문사회계열(29.9%),공학계열(41.2%),자연과학계열

구분 통계적 기준 평균(M)

분포의 집중경향을 나타내는 수치로서 해당 자료의 중앙값에 근접 하는 수치여야 한다.Meir& Gati(1981)에 따르면 5점 리커트 척도 의 경우 평균값이 1.5∼4.5일 때 수용가능하다고 보았다.

표준편차(SD) 분포의 흩어진 정도를 나타내는 수치로 적당한 값을 가져야 하는데, Meir&Gati(1981)에 따르면 0.75이상일 때 수용 가능하다고 보았다.

왜도(skewness)

한 분포의 모양이 좌우대칭인가를 나타내 주는 것으로서,분포의 긴 꼬리가 왼쪽에 있으면 부적으로,오른쪽에 있으면 정적으로 편 포된 것을 나타낸다.′왜도<±2′를 분석 기준으로 삼았다(Huck&

Cormier,1996). 첨도(Kurtosis)

분포의 뾰족함의 정도를 나타내는 지표로서,본래 정상분포의 첨도 는 3이지만,SPSS에서는 0으로 계산한다.왜도와 마찬가지로 ′첨 도<±2′를 분석 기준으로 삼았다(Huck&Cormier,1996).

문항-전체 상관(item-total

correlation)

일반적으로 0.30이상이면 적절하다고 보는데(Gable & Wolf,1993), 특정 문항이 타 요인과의 상관계수가 더 높거나 문항제거 시 요인 신뢰도가 높아지는 문항은 제거한다.

(14.8%),예체능계열(14.1%)로 나타났다.

예비조사에서 수집된 자료를 분석할 때,일반적으로 사용하는 방법은 문항분석,신뢰도 분석,요인분석 등이다(이종범,2005).따라서 본 연구에서도 예비조사 결과를 분석하기 위 해서 다음과 같은 연구방법을 활용하였다.

첫째,문항분석(item analysis)의 일차적인 목적은 검사에 적합한 문항과 그렇지 않은 문항을 선별하는 것으로 이를 위하여 일반적으로 측정도구를 개발하는 문항분석에서는 문 항별 평균과 표준편차,문항별 반응분포,문항-전체 상관을 통하여 문항분석을 실시한다 (김양분 외,2004).문항별 평균 및 표준편차 분석의 경우 문항의 평균이 극단적인 값을 가지고 있거나,표준편차가 지나치게 작은 경우에는 응답자의 개인차를 충분히 변별해주 지 못하는 바람직하지 못한 문항으로 간주한다.또한,문항-전체 상관분석의 경우,문항-전체 상관이 높으면 그 문항에서 높은 점수를 받은 응답자가 경우,문항-전체 점수에서도 높은 점수 를 받을 가능성이 높은 반면,문항에서 낮은 점수를 받은 응답자가 전체 점수에서도 낮은 점수를 받을 가능성이 높다는 것을 뜻하기 때문에 이 경우 문항변별력이 높은 것으로 간 주한다.예비조사 단계에서 문항분석은 평균,표준편차,왜도,첨도 등을 검토하고,문항-전체 상관분석 방법을 활용하여 문항의 변별력을 확인하였다.문항분석을 위한 통계적 기 준을 제시하면 <표 Ⅲ-5>와 같다.

<표 Ⅲ-5>문항분석을 위한 통계적 기준

둘째,전문대학생의 학교만족도 측정도구의 구성요인의 규명을 위해 탐색적 요인분석 (exploratoryfactoranalysis)을 실시하였다.이를 위해 수집된 자료를 표본으로 가정하는 최대우도법(김주환 외,2009)과 사회과학에서 요인간 상관을 가정한 사각회전 방식인 직접 오블리민(directoblimin)을 이용(김계수,2011)하여 요인구조를 파악하고,문항별 요인적재 량(factorloading)이 .4이상을 확보하지 못하여 부적절(진영학,2012)하다고 판단된 문항은 수정하거나 삭제하였다.궁극적으로 설정된 각 요인들이 단일차원성을 확보할 수 있는 방 향으로 문항을 결정하였다.

셋째,신뢰도 분석(reliabilityanalysis)은 크게 시간에 따른 안정성을 의미하는 신뢰도 분석과 내적일관성에 따른 신뢰도 분석으로 구분할 수 있는데,일반적으로 예비조사 단계 에서는 Cronbach’sɑ나 KR-20정도만을 분석하는 것이 일반적(정철영 2002)이라는 의견 에 따라 2차 예비조사에서는 측정도구의 신뢰도 분석을 위해 문항내적 일치도 계수 (Cronbach’sɑ)를 산출하여 검사도구 전체의 신뢰도 수준을 확인하고,문항제거 시 신뢰도 계수를 산출하여 전체 신뢰도 계수를 낮게 하는 문항을 삭제하였다.

나.본조사 실시 및 분석 1)연구의 대상

이 연구는 최종적으로 전문대학생의 학교만족도 측정도구를 개발하는데 연구의 목적이 있으며,이를 위해 본조사를 통해서 측정도구에 대한 타당도와 신뢰도를 검증하고자 하였 다.예비조사를 통해서 확정된 전문대학생의 학교만족도 측정문항에 대한 타당도 검증을 위해서는 구인타당도를 검증하여야 하기 때문에 적절한 표본의 선정이 무엇보다 중요하 다.

이 연구의 대상은 전문대학에 재학 중인 학생으로서 2013년 현재,우리나라의 전문대학 현황은 <표 Ⅲ-6>과 같이 139개 전문대학에 471,141명의 학생이 재학 중이다.현황을 좀 더 구체적으로 살펴보면,우선,대도시와 중소도시로 구분하였을 때,대도시 소재 전문대 학 72개(51.8%)와 중소도시 대학 67개(48.3%),우리나라 전문대학생의 성별은 남학생 188,981명(40.1%),여학생 282,160명(59.9%)이며,학년별 비율을 보면,1학년 209,424명 (44%),2학년 191,555명(41%),3학년 70,162명(15%)이며,본 조사에서 4학년 재학생이 대상

에서 제외된 이유는 전문대학의 4학년 재학생은 간호학과에서만 2012년부터 4학년 재학생 이 존재하기 때문에 재학생 수가 타학년에 비해 상대적으로 매우 적고²⁾,동일전공으로만 이루어진 특수성 때문에 전문대학의 4학년 재학생 모집단 전체를 대표하기에 현 시점에서 무리가 있을 것으로 판단하였기 때문이다.다음으로 계열별로 살펴보면,공학계열 125,689 명(27%),인문사회계열 152,460명(32%),자연과학계열 140,049명(30%),예체능계열 52,943명 (11%)으로 구성되어 있다.

<표 Ⅲ-6>전국 전문대학의 학교 수 및 재학생 수 현황

구분 학교수

재학생수

성별 학년별 계열별

남학생 여학생 1학년 2학년 3학년 공학 인문 사회 자연

과학 예체능 계

대도시

서울 9 ¹³^,⁴⁷⁴ ³⁰^,²⁹9 18,187 17,684 7,902 14,130 15,315 5,546 8,782 43,773 부산 9 ¹²^,⁸⁶² ¹⁹^,⁶¹^{3 15,}120 13,903 3,452 8,638 12,426 9,090 2,321 32,475 대구 7 ¹⁶^,³⁰² ²¹^,⁰⁹7 16,481 15,010 5,908 11,600 10,524 13,198 2,077 37,399 인천 3 ⁵^,³¹⁷ ⁹^,³¹⁴ 6,846 6,188 1,597 6,355 5,131 1,510 1,635 14,631 광주 6 ⁶^,⁶⁴⁷ ¹⁰^,⁵⁶⁸ 7,102 6,815 3,298 3,702 4,219 8,953 341 17,215 대전 4 ⁸^,¹³⁶ ¹¹^,¹⁵⁶ 8,483 7,950 2,859 4,247 5,323 7,940 1,782 19,292 울산 2 ³^,⁴¹⁹ ⁴^,⁴⁷⁹ 3,275 2,997 1,626 2,994 1,605 3,189 110 7,898 경기 32 ⁶⁰^,⁷⁷⁴ ⁸³^,⁵²4 65,550 57,948 20,800 43,638 47,240 29,228 24,192 144,298

중소도 시

강원 9 ⁵^,⁸³⁸ ⁷^,⁸²⁶ 6,144 5,547 1,973 2,560 4,989 4,770 1,345 13,664 충북 5 ⁷^,¹⁵¹ ⁸^,⁹⁴⁵ 7,616 6,485 1,995 4,623 4,598 5,940 935 16,096 충남 7 ⁸^,³⁰¹ ¹¹^,⁷⁵⁰ 9,133 8,401 2,517 3,002 6,805 7,252 2,992 20,051 전북 9 ⁶^,⁶⁸⁴ ¹⁰^,⁹⁷² 7,820 7,302 2,534 2,819 5,148 7,315 2,374 17,656 전남 9 ⁸^,⁶²⁶ ¹⁴^,⁹⁹⁹ 9,789 9,759 4,077 3,665 8,731 10,142 1,087 23,625 경북 16 ¹³^,⁴⁰⁵ ²¹^,⁴⁴^{9 15,}527 14,226 5,101 6,224 13,199 13,377 2,054 34,854 경남 10 ⁹^,⁵¹¹ ¹¹^,⁸⁷⁷ 9,401 8,673 3,314 7,024 4,439 9,489 436 21,388 제주 2 ²^,⁵³⁴ ⁴^,²⁹² 2,950 2,667 1,209 468 2,768 3,110 480 6,826 합계 139 188,981 282,160209,424 191,555 70,162 125,689 152,460 140,049 52,943 471,141 자료 :고등교육통계,KEDI

*대학 수는 2013년 기준이며,재학생 수는 2012년 10월 기준임.

이 연구의 모집단은 우리나라 전문대학의 전문학사 정규과정에 재학하고 있는 학생이 다.설문조사 실시를 위하여 고등교육통계(교육개발원,2012)를 기초로 전국의 전문대학을 다단계비례유층무선표집(Multi-stageproportionalstratifiedrandom sampling)하였다.표

2) 2013년 현재 전문대학에 4학년 재학생은 15개 대학에서 남학생 55명, 여학생 623명으로 총 678명

집방법을 구체적으로 살펴보면,전문대학을 표집단위로 하여 우리나라 전체 전문대학 모 집단에서 1차로 학교 소재 지역(대도시·중소도시)별로 학교 수 구성비에 따라 대도시 51 개(51.8%),중소도시 47개(48.2%)학교를 비례유층무선표집하였다.그리고 2차로 전체 모 집단의 계열별(공학계열 27%,인문사회계열 32%,자연과학계열 30%,예체능계열 11%), 학년별(1학년 44%,2학년 41%,3학년 15%)비율을 감안하여 1개 전문대학 당 240명을 표 집하여 인문사회계열,공학계열,자연과학계열은 1,2학년 각 30명,3학년 10명,예체능계 열은 각 학년별 10명)총 23,520명을 표집하였다.

표본규모를 결정하는 공식에 따라 신뢰도 99% 수준의 허용오차 ±1% 수준에서 모집단 이 50만명일 때,적정 표본의 크기가 13,557명이상이므로(임인재,1990),본 연구에서 대상 으로 하는 모집단의 크기 471,141명임을 감안할 때,전체 표본 크기인 23,520명은 회수율 과 불성실한 응답 등을 고려했을 때 적절하다고 할 수 있다.

2)자료의 수집 및 분석

본조사를 위한 측정도구의 배부 및 수집은 2013년 11월 7일부터 11월 17일까지 10일간 이루어졌으며,표본으로 선정된 전문대학에 협조문을 발송하여 이 조사의 중요성을 인식 하게 하고,대학의 행정보직자의 협조를 얻어 조사에 참여하는 학생들이 학년별로 고르게 분포할 수 있도록 요청하였다.본조사 도구는 예비조사 결과를 토대로 수정·보완하여 최 종 확정된 45개 문항을 사용하였다.본조사 도구의 구성은 <표 Ⅲ-7>과 같다.

<표 Ⅲ-7>본조사 도구의 구성

영역 하위영역 문항번호

교육 지원 영역

교육과정

수업

교수

1,2,3,4,5,6,7,8,9,10,11,12,13, 14,15,16,17,18

진로 및 취업 지원 영역

진로 프로그램 및 진로 상담

취업 프로그램 및 취업 정보 19,20,21,22,23,24,25,26,27 행정 지원 영역 학사행정

직원 및 조교 28,29,30,31,32,33,34 물리적 지원 영역 교육 시설 및 기자재

캠퍼스 환경 35,36,37,38,39,40,41,42,43,44,45

측정도구는 설문조사로 실시하고 회수하였으며,이때 신뢰도 높은 자료의 수집을 위해 연구의 취지와 조사 실시 방법 및 유의사항 등을 이해하기 쉽게 설명한 안내문을 측정도 구 앞면에 첨부하였다.배부된 설문지 중 총 22,378명의 자료가 회수되었으며(회수율 95.1),회수된 자료 가운데 불성실하게 응답하였거나 일반적 사항에 응답하지 않은 845명 의 자료를 제외한 총 21,533명의 자료를 최종 분석에 활용하였다.조사에 응답한 대상자의 특성을 살펴보면 성별로는 남자(36.3%),여자(63.7%),학년별로는 1학년(57.4%),2학년 (34.6%),3학년(8.0%),계열별로는 인문사회계열(28.8%),공학계열(25.9%),자연과학계열 (29.9%),예체능계열(15.4%)로 나타나 모집단의 특성과 비교하였을 때,거의 유사한 특성

문서에서 전문대학생의 학교만족도 측정도구 개발 (페이지 114-120)