평가 도구 모델의 검증

이상과 같이 개발된 모델들에 대해서 전체 모델에 대한 평가 및 각 평가 영역의 적정한 배점, 그리고 각 평가 항목, 평가 지표, 그리고 특별히 평가 척도들의 중요성에 대한 전문가와 계열별 학원 실무자들의 1차 검토를 거쳤 다. 설문에서는 전체 모델에 대한 평가와 각 평가항목과 지표에 대해서 타당

성을 물었다. 이와 관련하여 사용된 검토 조사지는 부록에 제시되어 있다.

이 검토과정에서 제시된 전문가 및 학원 실무자들의 의견을 종합해 보면 다 음과 같다.

가) 전체 모델에 관한 평가

조사 결과는 전체적인 모델의 타당성에 대해 긍정적이었다. 이들이 제시한 의견들을 모델에서 수정 보완이 필요한 부분을 중심으로 요약하면 다음과 같다.

전체적으로 평가 항목들이 타당하다 하더라도 실제적 판단 기준을 제시하 기 모호한 항목들은 측정가능성을 고려해야 한다는 의견이었다. 이때 중점적 으로 고려해야 할 부분은 기술계 학원의 특성상 실습분야라는 의견이었다.

다시 말해서, 기술계 학원의 평가자료로 사용하기 위해서는 무엇보다 실습과 관련된 학생들의 교육환경, 취업, 자격취득 부분이 중요하다는 의견이다.

또한 소수의 의견이지만, 교육훈련 과정은 통상 교육훈련 수요조사, 교육 훈련과정 설계, 시설・장비・강사준비, 교육과정 운영, 수료, 취업 및 자격취 득으로 운영되며, 부대 활동으로 산업현장과의 교류(산학협력) 및 지역사회에 의 봉사활동 등이 수행되고 위의 사업 모두를 원활히 하기 위한 경영자의 관리활동이 부가되는 것으로 볼 수 있으며, 따라서 평가모델도 이러한 교육 훈련기관의 사업 절차를 감안하여 순차적으로 구성되는 것이 바람직하지 않 는가 하는 의견이 있었다. 만일 이러한 순차에 따라서 평가모델을 재구성한 다면 유사하거나, 동일한 항목을 통폐합하여 평가 항목들이 중복되지 않도록 잘 정리하는 것이 중요하다는 의견이 있었다.

나) 세부 항목에 관한 평가

이상에서 제시한 모델에 대한 의견 외에 세부 항목에 대한 의견을 물었는 데, 조사에서는 세부 평가 지표들을 제시하고 그에 대한 판단기준(평가 척도) 의 적합성에 관해 질문하였다. 평가척도의 적합성은 5중 척도( 1. 매우 부적 절 에서 5. 매우 적절 까지)로 제시하도록 하였으며, 또한 각 평가 항목에 대 한 개별적 의견을 제시하도록 하였다. 이상에서 제시된 의견들을 종합한 결 과를 정리하면 다음과 같다. 이 조사에 사용된 조사지는 부록에 제시되어 있 다.

(1) 항목별 적합성에 대한 평가

우선 판단기준(평가 척도)의 적합성에서 비교적 낮은 점수를 얻은 항목들 을 살펴보면 다음과 같다.

첫째, 교육훈련 과정(교습과정) 영역에서 판단기준의 적합성이 낮게 책정 된 평가척도들을 살펴보면, 교육훈련과정의 교습과정 특성화정도 항목에서 교습과정 내용의 독자성 판단 척도인 기술계 학원 목표와 교습 과정 내용 간의 일치도 와 유사 기관과의 교습과정 내용의 중복정도 가 타당성이 낮게 나타났다. 교습과목 선정의 선도성 항목에서 산업인력의 재교육훈련지표 의 실업자 재취업 훈련 실적 과 위탁 교육 훈련 실적 이 각각 적합성이 비교적 낮은 것으로 평가되었다. 산학협력의 기여도 에 대한 평가 척도인 현장실습 실적 도 타당성이 낮은 평가척도로 나타났다.

둘째, 교원(강사) 영역에 관한 평가척도 중 적합성이 낮게 나타난 항목들 은, 교원(강사)의 직무 충실성 및 만족도 에서 직무 만족에 대한 자체평가 결과 와 면담 조사 결과 항목에 타당성이 낮은 것으로 나타났다. 교원(강 사)의 자기개발 기회 제공 항목의 교원연수지원 실적 지표에 대한 판단 척 도인 강사연수 지원 금액 도 적합성이 낮은 것으로 평가되었다.

셋째, 기관운영의 영역에서 평가척도의 적합성이 낮다고 제시된 척도들은 기관운영의 경영의 투명성 항목에서 경영자의 리더쉽 에 대한 판단지표인 경영자의 경영 철학에 대한 면담결과 가 적합성이 비교적 낮은 것으로 나타 났다.

이상에서 살펴본 의견들을 표로 정리한 것이 <표 Ⅴ-5>이다. 표에는 전문 가 의견과 기술계 학원 실무자의 의견을 나누어 제시하였다. 조사에서 판단 기준(평가척도)에 관한 적합성이 낮게 나타난 항목들에 대해서는 표로 표 시하였으며 이들이 제시한 의견도 함께 첨부하였다.

(2) 각 항목에 대한 관계자의 개별적 의견 제시

평가영역 중 교육훈련과정(교습과정)의 평가척도인 교습과정 내용의 독자 성 에 관하여 실질적으로 기술계 학원의 교습과정이 기관별로 큰 차이가 없 음으로 기술계 학원의 교습과정을 가지고 평가하기에는 어려움이 있다는 의 견이 있었다. 앞서 학원 현황에서 제시한 학원원칙의 정리 결과에서도 기술

계 학원들의 계열별 과정에는 커다란 차이가 없는 것으로 나타나고 있다. 그 러나 학원의 규모나 시설 등에 따라 교양과목이나 수반되는 기초 분야에 대 한 과정에는 차이가 있었다. 예를 들어, 동일한 간호조무사 양성기관이라도 의학 기초 영어 과정이 개설된 학원과 개설되어 있지 않은 학원으로 나뉘어 있었다.

또한, 교육훈련과정을 평가항목으로 하는 것은 타당하지만 세부 평가 항목 의 정리가 필요하다는 의견이 있었다. 이를 구체적으로 살펴보면 다음과 같 다.

첫째, 교습과정 내용의 독자성 에서 동일한 직종일 경우 전체 교과목 중 특성화 부문이 통상 교과과정상 일부 반영되므로 교습과정의 내용의 독자성 을 평가하는 것보다는 특성화 부분이 어느 정도 반영되는 가를 평가하는 것 이 바람직할 것이다.

둘째, 교습과정 선정의 선도성 부분에서는 교습과정의 선도성 은 교육훈련 내용이 산업체의 현장 수요를 얼마나 반영하고 있느냐를 평가하는 것이 바 람직하다. 그러므로 산업인력의 재교육훈련 실적, 특히 실업자재취직훈련 및 기타 성인대상교육훈련 실적 등을 평가항목으로 상정하기에는 어려움이 있 다고 판단된다.

셋째, 교습과정 운영의 적절성 에서는 학습과목의 사후 만족도 는 훈련성 과 부문으로 평가하는 것이 바람직하며, 교육 훈련과정 평가로는 부적절하다 는 의견이었다.

또한 학생선발・유지의 적절성 은 교육훈련과정보다는 별도의 평가항목으 로 분리하는 것이 바람직하며, 실무 중심의 교습과정 운영 은 교습과정 운 영의 적절성 과 통합하여 평가하는 것이 바람직해 보인다는 의견과 기술계 학원의 인지도를 평가할 수 있는 방법이 모호하여 평가에 애로 사항이 예상 된다는 의견이 있었다. 이를 위해서는 조금 더 구체적인 기준을 제시하는 것 이 바람직하다는 의견이었다.

<표 Ⅴ-5> 기술계 학원의 평가 항목, 지표, 배점에 관한 검토의견 종합

평가 항목 평가 지표 평가 척도 전문가 학원

실무자

평가영역 1. 교육의 훈련목적(15)

세부목적의1-1.

시대적합성

교육 환경 변화에 따른 기술계 학원 위상의 적합성

① 교육 환경 변화에 대한 경영주의 의견

② 기술계 학원의 정체성에 대한 경영주의 의견

교습과정별 세부목적의 적합성

① 기술계 학원의 정체성에 따른 교습과정의 세 부목적과의 일치도

② 기술계학원의 목표진술의 구체성 및 명료성

③ 기술계 학원의 목표에 대한 내부 구성원의 공 유 정도

평가영역 2. 교육훈련과정(교습과정) (25)

교습과정의2-1.

특성화 정도

교습 과정 내용의 독자성

① 기술계 학원 목표와 교습 과정 내용간의 일치도

② 유사기관과의 교습과정 내용의 중복 정도

자격증 취득

① 전체 교습과정 중 자격 취득 관련 교습 과정 운영 비율

② 관련 자격증 취득율

타당하나 과정별로 나뉘어짐

2-2.

교습과정 선정의 선도성

교습 과정의 현장의견 반영

① 교습과정 개발시 산업체와의 간담회 실적 및 참여자 수

② 교습과정에 반영 실적(검토, 반영)

산업체 외부 인사의 활용

① 산업체 강사의 수 및 담당 시간

② 산업체 강사 경력과 교과목 일치도

산업 인력의 재교육훈련

① 실업자 재취업 훈련 실적

② 위탁 교육 훈련 실적

③ 기타 성인 대상 교육 훈련 실적

산학 협력의 기여도 ① 산학 협력 관련정보의 교류 실적

② 현장 실습 실적

(계 속)

평가 항목 평가 지표 평가 척도 전문가 학원 실무자

2-3.

교습과정 운영의 적절성

교습과정 운영의 다양성

① 교습과정 반 운영 실적

② 교습과정 운영 유형별 학생 수 교습과정 운영

시기의 적절성

① 시간별 교습 과정 운영 실적

② 연간 교습과정 운영 실적 학습과목의 사후

만족도

① 학습과목별 사후 만족도 결과

② 만족결과의 피드백 절차 및 실적

2-4.

학생 선발, 유지의 적절성

수강생 중도탈락율 ① 학원 전체/ 교습과정별 탈락율 분포

② 중도탈락 원인 분석 및 대책 수립 여부

취업지도의 적절성

① 취업 상담 실적(학생 수 및 건수)

② 취업 상담 절차 및 제도 운영

③ 취업 상담실 확보 및 운영 : 타 취업전문기관과의 연계 포함

현실적 상황 어려움

수강생 확보의 적절성 ① 학원 전체/ 교습과정별 지원율 및 확보율 수강 후 추후 지도

제공

① 수강생 관련 정보 파악 및 DB화 실적

② 수강 후 재수강에 대한 유인가 여부 및 운영 실적

2-5.

실습중심 교습과정 운영

실습 운영의 적절성 ① 이론과 실습 비율의 적절성

실습 운영의 충실성 ① 실습시 학생 규모 및 강사 1인당 학생 수

② 학생 1인당 직접 실습비 평가 영역 3. 교원(강사) (15)

3-1.

강사의 자기 개발 기회제공

교원의 연수지원실적

① 연수 지원 강사의 비율

② 강사의 연간 연수 일수 분포

③ 강사의 연수 지원 금액

3-2.

정규직 강사 확보의 적절성

교원확보의 적절성 ① 강사 1인당 학생 수

② 교습과정별 강사 1인당 학생 수 전임교원의 수업부담

정도

① 수업시간중 전임 강사 담당 비율

② 전임강사 1인당 수업시간 및 분포 (주당)

교원의 학위전공과

담당교과목의 일치성 ① 전임강사 학위와 교과목 일치도

분야별 어려움 있음

(계 속)

문서에서 기술계 학원의 평가체제 구축방안 (페이지 143-151)