평가지표의 개발

□ 평가지표와 평가질문,성과지표

ㅇ 평가질문을 보다 체계화하고 가급적 계량화할 수 있도록 하는 것이 평가 지표임.

ㅇ 사업이 도달하여야 하는 성과목표를 지표화한 것은 성과지표이며,이 성 과지표에 따라 사업의 진도와 성과를 평가한다면,성과지표를 평가지표로 활용할 수 있을 것임.

-따라서 이하에서는 평가지표와 성과지표를 혼용하기로 함.

□ 평가지표의 구분

ㅇ 일반 평가지표 혹은 표준지표:일반적으로 점검,평가하여야 할 사항에 대 해서는 통합평가 매뉴얼에서 권고하는 표준질문에 입각하여 평가지표를 개발

-이 밖에 사업 간 비교의 목적에서도 일반 평가지표를 사용할 필요 있음.

■ 강경재(2012,71-72) ㅇ 표준지표의 활용 이유

-동일 혹은 유사한 목적을 가진 사업,동일한 주제,분야의 사업임에도 사업시행기관이 서로 다른 경우,대상국 파트너에 따라(통계자료 작성 시스템의 차이 등의 이유로)성과측정을 위한 지표가 달라질 수 있음.

-이렇게 되면 사업 간 비교 혹은 해당 주제,분야에서 시행된 사업을 종 합하는 것이 어렵게 될 수 있음.

-따라서 동일한 방식의 측정이 가능하고 보다 일반화되어 있는 지표를 측정할 필요가 있음.

표 3-9. EDCF보건분야 표준 평가지표 사례

표 3-9. EDCF보건분야 표준 평가지표 사례

표 3-10. KOICA농업분야 표준 평가지표 사례

표 3-10. KOICA농업분야 표준 평가지표 사례

목표치(Target)설정 → ⑤ 기초선 조사(baselinesurvey)및 비교 대상 선정 ㅇ성과지표 및 목표치를 설정하는 과정에서는 지표를 명확히 정의하고

측정방법론을 밝히며,수원국과의 협의를 거쳐 지표의 적합성‧타당성을 검증할 필요가 있음.

-① 성과지표 상세 정의 → ② 지표 측정방법론 기술 → ③ 지표의 적합 성 및 타당성 검증(수원국과 협의)→ ④ 최종 확정

① 사업 대상지 수혜자 범위

-잘못된 예:000지역 주민 → 잘된 예 :000지역 마을주민 245가구 3,000명

② 사업 대상지와 가장 가까운 행정단위 성과

-잘못된 예:000국가 빈곤율 감소 → 잘된 예 :헤토사 보레다 245가 구의 빈곤율 감소

③ 사업단위 성과를 비교할 대상 선정

-잘못된 예:000직업훈련원 취업률 90% 상승 → 잘된 예 :유사 직 업훈련원 80% 상승 대비 000직업훈련원 취업률 90% 상승

ㅇ 성과지표를 설정할 때에는 다음과 같은 점에 주의하여야 함.

□ 기초조사를 통한 자료수집의 필요성

ㅇ 이와 같이 성과지표에 의한 효과적인 평가를 위해서는 사업형성,사업시 행 초기에 기초선 조사를 통해 자료(baselinedata)를 수집할 필요가 있음.

-핵심적인 성과(outcomes)와 영향(impacts)에 관련된 항목들에 대한 자 료,즉 성과지표(특히 계량적 지표)를 설정하여 객관적 모니터링,평가 가 가능하도록 하여야 함(권 율 2011,38).

ㅇ 기초조사는 사전평가를 통해,혹은 타당성 조사 등 사업발굴 단계에서 추 진할 수 있음.

-통합평가 매뉴얼에서는 사전평가(Ex-anteEvaluation)를 “사전평가는 결

표 3-12. 농업분야 성과지표,기준치,목표치 제시 사례

표 3-12. 농업분야 성과지표,기준치,목표치 제시 사례

표 3-13. 평가방법(통합평가 매뉴얼)

(1)문헌조사

평가 대상 관련 서류는 물론,관련 분야의 문헌,통계‧데이터,타 공여기관에 서 수행한 유사 사업 자료 등 다양한 문헌자료를 연구,분석하여 필요한 정 보를 수집하는 방법을 말한다.모든 평가를 실시할 때 가장 먼저 사용되는 방법으로,기초 정보 수집에는 유용하나 평가와 직접 연관성이 결여되어 신 뢰성의 검증이 어려우므로 다른 방법들과 보완하여 사용한다.

(2)직접관찰

사업 대상 지역을 직접 방문하여 산출물(output)을 직접 확인하고 정보를 수 집하는 방법이다.시간과 비용이 많이 소요되는 등의 사유로 관찰 범위 및 내용에 한계가 있으나,사업의 효과와 지속가능성을 분석하는 데 있어서 좀 더 실제적이고 생생한 결론을 도출할 수 있다는 장점이 있다.

(3)설문조사

조사 대상을 설정해 설문지를 주고 회신을 받는 방법과 조사자가 대상자에 게 질문을 하면서 답을 바로 기입하는 방법이 있다.설문조사에 의해 수집한 데이터는 퍼센트나 순위 집계 등으로 수치화할 수 있지만,모집단이 작거나 시간적 제약이 있는 경우 정보의 신뢰성에 문제가 생긴다.또한,설문지 회 수여부가 불확실하고,문항 작성 방식,응답형식 등에 따라 정보의 왜곡이