정보시스템 운영 성과측정 매뉴얼

(1)

성과측정 매뉴얼

2017. 4.

(2)

정보시스템 운영 성과측정

매뉴얼

(3)

05 04

정보시스템 운영 성과측정 매뉴얼

Ⅳ. 정보자원의 처분

Ⅴ. 운영 성과 관리 및 활용

붙임자료 참고자료

1. 목적 78

2. 정보자원 처리 절차 78

3. 정보자원 분리(Carve-out) 가능성 검토 78

4. 정보자원 재활용 가능성 검토 82

5. 정보자원 재활용 및 폐기 방안 86

1. 목적 98

2. 정보시스템 운영 성과관리 업무 추진 절차 98 3. 성과관리 조직 및 담당별 역할 101

4. 성과측정 결과의 제출 104

5. 성과측정 결과의 활용 105

<붙임> 정보시스템 운영 성과관리 지침 109

<참고 1> 세부기술요소 정의 및 예시 127

<참고 2> 하드웨어 규모산정 절차 141

<참고 3> 1차 및 2차 성과측정 예시(재개발) 158

<참고 4> 1차 및 2차 성과측정 예시(폐기검토) 178

<참고 5> 정보자원 처리 방안 예시 185

<참고 6> 물품관리 법정 서식 및 관련시스템 199

<참고 7> 모바일 앱 성과측정 지표 204

<참고 8> 정보시스템 운영 성과측정 FAQ 206

Ⅰ. 개 요 ^{1. 목적} ⁰⁷

2. 매뉴얼의 구성 및 활용 07

3. 정보시스템 운영 성과관리의 이해 09

1. 목적 13

2. 1차 성과측정 절차 13

3. 측정 항목 17

4. 측정 지표 19

5. 척도환산 39

6. 유지관리 유형 결정 39

7. 폐기검토 유형 재분류 40

8. 범정부 EA 포털(GEAP) 활용 48

Ⅱ. 1차 성과측정

Ⅲ. 2차 성과측정 ^{1. 목적} ⁵¹

2. 2차 성과측정 절차 51

3. 정보자원 효율성 측정 52

4. 구축방안 정의 54

5. 투자 타당성 분석 63

6. 최종의사결정 76

(4)

07 06

Ⅰ. 개요

1. 목적

본 매뉴얼은 「정보시스템 운영 성과관리 지침(행정자치부 고시 제2017-10호, 2017.3. 28.」에 따라 정보시스템 운영 성과를 측정하기 위한 구체적인 기준과 절차, 방법 등을 상세하게 설명하여 정보시스템 운영 담당자가 보다 쉽고 정확하게 성과측정 활동을 수행하고 정보시스템 운영 성과관리 제반 사항에 대한 이해 증진을 목적으로 한다.

2. 매뉴얼의 구성 및 활용

2.1 매뉴얼의 구성

본 매뉴얼은 정보시스템 운영 성과측정과 결과의 관리 및 이행을 위해 필요한 기본적인 업무활동 내용을 5개의 장으로 구성하여 설명하고 관련 지침, 가이드 또는 예시, 사례 등의 참고자료를 제공하고 있다.

[그림 1] 매뉴얼 구성 체계

Ⅰ

개 요

1. 목적

2. 매뉴얼의 구성 및 활용

3. 정보시스템 운영 성과관리의 이해

Ⅰ. 개요 Ⅱ. 1차 성과측정 Ⅲ. 2차 성과측정

1. 목적 2. 매뉴얼의 구성 3. 정보시스템 운영성과

관리의 이해

1. 목적

2. 1차 성과측정 절차 3. 측정 항목 4. 측정 지표 5. 척도환산 6. 유지관리 유형 결정 7. 폐기검토 유형 재분류 8. 범정부 EA포털 활용

1. 목적

2. 2차 성과측정 절차 3. 정보자원 효율성 측정 4. 구축방안 정의 5. 투자 타당성 분석 6. 최종의사결정

참고

[참고1] 세부기술요소 정의 및 예시 [참고2] 하드웨어 규모산정 절차 [참고3] 1차 및 2차 성과측정 예시(재개발) [참고4] 1차 및 2차 성과측정 예시(폐기검토)

[참고5] 정보자원 처리방안

[참고6] 물품관리 법정 서식 및 관리 시스템 [참고7] 모바일 앱 성과측정 지표 [참고8] 정보시스템 운영 성과측정 FAQ

붙임

[붙 임] 정보시스템 운영 성과관리 지침

Ⅳ. 정보자원의 처분 Ⅳ. 운영 성과관리 및 활용

1. 목적

2. 정보자원 처리 절차 3. 정보자원 분리 가능성 검토 4. 정보자원 재활용 가능성 검토 5. 정보자원 재활용 및 폐기방안

1. 목적

2. 운영 성과관리 업무 추진 절차 3. 담당별 주요 역할

4. 성과측정 결과의 제출 5. 성과측정 결과의 활용

▶

(5)

09 08

Ⅰ. 개요에서는 본 매뉴얼에 대한 전반적인 구성과 기관 담당자 및 일반 사용자들이 본 매뉴얼을 어떻게 활용할 수 있는지에 대해 설명한다.

Ⅱ. 1차 성과측정은 「정보시스템 운영 성과관리 지침」 제6조에서 제8조에 해당하는 것으로서 1차 성과측정 절차, 측정항목, 측정 지표, 척도환산, 유지관리 유형 결정, 폐기검토 유형 재분류 등에 대한 세부 내용을 설명한다.

Ⅲ. 2차 성과측정은 「정보시스템 운영 성과관리 지침」 제9조에서 제13조에 해당하는 것으로서 2차 성과측정 절차, 정보자원 효율성 측정, 구축방안 정의, 투자 타당성 분석, 최종의사결정에 대해 설명한다.

Ⅳ. 정보자원의 처분은 「정보시스템 운영 성과관리 지침」 제14조에 해당하는 것으로서 재개발, 통폐합, 폐기 대상 정보시스템과 관련된 정보자원 재활용 및 폐기 절차 및 기준에 대해 설명한다.

Ⅴ. 운영 성과관리 및 활용은 「정보시스템 운영 성과관리 지침」 제6조1항과 제15조, 제17조에 해당하는 것으로서 범정부 운영 성과관리 추진계획과 연계하여 개별기관에서 수행하는 운영 성과관리 업무활동 및 역할·책임 등에 대해 설명한다.

2.2 매뉴얼의 활용

본 매뉴얼은 정보시스템 운영 성과를 측정함에 있어 기준, 절차, 방법 등의 모호함을 제거하여 성과측정의 편의성과 정확성을 향상시키고, 운영 성과관리 교육 및 관련 정보화 업무 추진 시 본 매뉴얼의 내용을 활용 또는 참조할 수 있도록 하고 있다.

정보시스템 운영 담당자는 1차 측정에 필요한 기초데이터의 속성, 비용 및 업무 측면의 측정 지표를 정확하게 이해함으로써 객관적인 방법으로 신속하게 운영성과를 측정할 수 있다. 또한 1차 측정의 결과에 따라 필요 시 2차 측정을 직·간접적으로 수행할 수 있도록 절차나 방법, 사례 등을 상세하게 설명하고 있다.

정보화 총괄부서 담당자 또는 관리자가 1차 측정 및 2차 측정의 결과가 합리적인지 판단하고, 정보화 업무 추진 과정에서 운영 성과측정 결과를 적절하게 활용할 수 있도록 안내하고 있다.

정보시스템 운영 성과관리 확산 및 교육자료 등으로 활용할 수 있고 관련 정보화 정책 및 제도를 실행함에 있어 운영 성과측정 결과를 활용 또는 참고할 수 있도록 필요한 내용을 제공하고 있다.

3. 정보시스템 운영 성과관리의 이해

3.1 정보시스템 운영 성과관리의 필요성

최근 정보시스템의 지속적인 증가와 노후화로 인해 운영·유지보수 비용 등 경직성 비용은 증가하고 있으나, 대내외 정책 및 기술 변화에 효과적으로 대응하지 못하고 있다. 따라서 현재 운영 중인 정보시스템의 운영 성과를 측정하여 폐기, 통폐합 또는 구조개선을 추진함으로써 불필요하거나 과도한 비용 투입을 방지하고, 그 여력으로 신규 투자 기회를 확대할 수 있는 투자관리 효율화 방안이 요구되고 있다.

이를 위해, 정보시스템의 운영·유지보수에 투입되는 비용 측면과 업무 효율 및 정책 기여 등의 업무 측면의 성과를 객관적으로 측정하여 운영 타당성을 판단하고 지속적인 운영성과 제고를 위한 체계적인 관리와 제도적 지원이 필요하다.

3.2 정보시스템 운영 성과관리 및 성과측정의 개념

“정보시스템 운영 성과관리”란 정보시스템 운영타당성을 판단하기 위한 정해진 기준에 따라 성과를 측정하고, 그 결과에 따라 정보시스템의 효율적 운영을 위한 유지관리유형을 결정하여 업무 및 비용 측면의 성과를 높이기 위한 제반 활동을 의미한다.

“정보시스템 운영 성과측정”이란 정보시스템 운영과 관련된 업무 및 비용 측면의 성과를

(6)

11 10

Ⅰ. 개요

관리하기 위해 정해진 지표에 따라 측정하는 활동을 의미한다.

3.3 정보시스템 운영 성과관리 제도의 적용 근거

「전자정부법 제45조 제3항 및 제4항」에 따라 행정기관 등의 장이 그 소관 정보시스템 운영 시 운영타당성을 판단함에 있어서 준수하여야할 기준과 절차 등을 「정보시스템 운영 성과관리 지침(행자부 고시 제2017-10호, 2017.3.28.)」에서 규정하고 있으며, 기관은 지침에 의거하여 매년 운영 성과를 측정하고, 측정 결과에 따른 적합한 후속 조치를 수행하여야 한다.

[그림 2] 정보시스템 운영 성과관리 지침 지침 구성 및 주요 내용 총칙

· 목적

· 정의

· 적용범위

지속적 관리

· 성과측정 결과 등의 제출

· 측정 결과에 따른 개선의무

· 성과측정 결과의 활용

· 재검토 기한

· 성과측정의 목적

· 성과측정 대상 정보시스템

· 일몰대상 시스템

· 성과측정 절차

· 정보시스템 운영 유지관리유형의 분류

· 폐기검토 대상 정보시스템의 재분류

· 정보자원의 효율성 측정

· 성과측정 결과에 따른 정보시스템 구축범위의 결정

· 정보시스템 구축방안 도출

· 투자타당성 분석

· 최종 투자의사의 결정

· 정보자원의 처분

정보시스템 운영 성과의 측정

유지관리 유형분류

(1차 성과측정)

개선 방안 마련 (2차 성과측정)

3.4 정보시스템 운영 성과측정 모델의 구성

정보시스템 운영 성과측정은 유지관리 유형을 판단하는 1차 측정과, 그 결과에 따라 필요한 개선방안을 마련하는 2차 측정으로 구성되어 있다.

1차 성과측정은 비용과 업무 측면의 성과를 측정하여 「유지」, 「기능고도화」, 「재개발」,

「폐기검토」의 유지관리 유형을 식별하고 폐기검토의 경우 추가적인 검토를 통하여 「재개발」,

「통폐합」, 「폐기」로 재분류 한다.

2차 성과측정은 1차 측정 결과를 바탕으로 현행 정보시스템을 분석하고, 요구사항을 도출하여,

구축범위 및 구축방안을 수립하고, 투자타당성 분석내용을 종합적으로 고려하여 투자방안 및 투자여부를 최종적으로 결정한다.

[그림 3] 정보시스템 운영 성과측정 모델

운영의 적정성

경제성 분석 정성적 효과분석 업무수행

영향도

누적유지보수비 비율

현행정보 시스템 분석

구축방안도출 개발 및 구축범위

결정 요구사항 정의

기능활용도 투입운영유지

비용 증감률

사용편의성 평균운영유지

비용 증감률

목표대비업무성과 달성도 또는 업무성과 증감률 유지의

용이성

사용 편의성 비용의 효율성

업무성과 달성도

유지

기능 고도화

재개발

통폐합

폐기 기능

고도화 재개발

재개발

통폐합

폐기 폐기

검토

1차 성과측정 (유지관리 유형 분류)

관점별 성과측정

항목 및 지표

유지관리 유형

구축방안 정의 폐기검토

유형재분류

2차 성과측정 (개선방안 마련)

자원효율성

측정

투자타당성 분석

최종의사 결정

비 용 측 면 업 무 측 면

개선 수요

투자 여부 자원

효율성 (서버) 측정 NO

NO YES

YES

(7)

13 12

1차 성과측정

1. 목적

2. 1차 성과측정 절차 3. 측정 항목 4. 측정 지표 5. 척도환산

6. 유지관리 유형 결정 7. 폐기검토 유형 재분류 8. 범정부 EA 포털(GEAP) 활용

Ⅱ

1. 목적

1차 성과측정은 비용과 업무 관점 별 성과측정을 통해 정보시스템의 유지관리 유형을 분류하고 폐기검토 대상 정보시스템에 대한 유형 재분류를 통하여 상세 유형을 식별을 할 수 있다.

이를 통해 정보시스템의 운영성과를 객관적으로 판단하고 그 결과에 따라 정보시스템의 운영 및 개선과 관련하여 합리적 의사결정을 지원하는데 목적이 있다.

2. 1차 성과측정 절차

1차 성과측정은 성과측정 대상을 식별하고, 측정 항목별로 필요한 기초데이터를 수집하여 데이터의 신뢰성을 점검한 후 성과측정을 진행한다. 성과측정 결과는 척도환산 기준에 따라 4가지 유지관리 유형(유지, 기능고도화, 재개발, 폐기검토)으로 분류되며 「폐기검토」대상으로 분류된 경우에는 추가 검토를 통해서 「재개발」, 「통폐합」, 「폐기」로 재분류한다.

[그림 4] 1차 성과측정 개요 측정

대상

비용

운영의 적정성

업무수행 영향도 유지의 용이성

사용상의 편의성 비용의 효율성

누적 유지보수비 비율 투입 운영유지비용

증감률 평균 운영유지비

증감률

기능 활용도

사용 편의성

목표대비업무성과달성도 (option 1)

법적 근거 분석 재개발

통폐합 폐기 영향도 평가

통폐합 가능성 분석

업무성과 증감률

(option 2) 업무

측정

관점 측정항목 측정지표 유지관리 유형 분류

폐기검토 유형 재분류 년 5

이 상 운 영 정 보 시 스 템

5

3

1 3 5

비 용

업무

유지

재개발

폐기 검토 대상

폐 폐기검토 상세식별 폐

5점

척도 환산 폐기 검토

고도화 기능

2.3

(8)

15 14

Ⅱ. 1차 성과측정

2.1 정보시스템 운영 성과측정 대상

정보시스템 운영 성과측정은 개발 및 구축이 완료되어 서비스 운영이 개시된 시점으로부터 5년이 경과한 정보시스템을 그 대상으로 측정 당해 연도 재개발 추진, 표준(공통)/개별(공통) 시스템 등 특정한 사유가 있는 경우를 제외한 모든 대상 정보시스템을 측정하여야 한다.

구축이나 시범 및 확산 과정을 거쳐 장기간 개발하는 정보시스템의 경우 전체 범위가 완성되지 않았어도 서비스의 운영이 개시된 부분을 대상으로 운영 성과를 측정할 수 있다.

기관 내부의 직원이 직접 유지보수를 수행하는 경우 등과 같이 정보시스템 성과측정에 필요한 비용 데이터를 정확하게 파악할 수 없는 경우 간편 측정 방법을 활용하여 성과를 측정할 수 있다.

5년이 경과하지 않은 정보시스템에 대하여 성과측정이 필요하다고 판단되는 경우 측정 지표의 변경 등에 대한 사항을 행정자치부와 협의 후 성과측정을 실시할 수 있으며, 모바일 앱은 「모바일 전자정부 서비스 관리지침(행정자치부 예규 25호, 2015.8.28.)」을 참고하여 성과측정을 실시한다.

단, 운영 성과측정 대상 시스템이지만 측정년도에 [표 1]의 일몰대상으로 폐기 예정인 시스템 (한시적 목적으로 운영된 시스템이 목적을 달성하거나 운영기간을 경과할 경우, 근거 법령의 개정 등으로 운영 목적이 소멸 된 경우 등)은 별도의 운영 성과측정 없이 운영을 중지할 수 있다. (예 : 연례행사가 아닌 특별한 행사를 위한 정보시스템, △△년도 스포츠 행사 시스템,

○○년도 선거 사이트 등)

그러나 일몰 시점 도래에도 불구하고 법·제도의 개정 등을 통해 운영기간을 연장하는 경우, 일몰대상 등록 시점부터 2년 이후에 폐기되는 정보시스템은 운영 성과를 측정하여야 한다.

정보시스템 운영 성과측정 대상이 확정되면 성과측정 계획을 수립하여 행정자치부로 제출해야 하며 아래 항목을 필수로 작성하여야 한다.

[1차 성과측정 계획]

• 일정계획 (1차 측정, 2차 측정, 정보시스템 운영위원회 개최, 이행(조치)계획 수립 일정 등)

• 유지관리 유형 분류기준 (3점, 기관평균)

• 추진체계 (지침 제8조3항에 따른 정보시스템 운영위원회 운영 및 활용 계획 유무)

•측정 대상 여부 확인

• 측정 제외대상에 대한 사유

• 일몰대상 식별

[표 1] 일몰대상 정보시스템 판단 기준

판단 기준 일몰대상 판단 내용 판단 근거 자료

정보시스템의 운영 필요성 상실 특정 목적의 완수, 한시적 사업의 종료

사업계획서의 내용 확인 사업완료보고서 내용 확인

법적 근거/효력 상실 근거 법률/규정의 폐지 등 근거 법령/규정 개정 및 폐지 내역

2.2 측정을 위한 기초데이터 확보

2.2.1 기초데이터 개요

성과측정을 위하여 지표에 적용되는 기초데이터는 측정하는 연도의 직전 연도를 당해 연도로 하여 산정한다. 기관에서는 매년 정보시스템의 구축 및 운영 과정에서 투입되는 비용과 정보시스템 서비스를 통한 업무성과를 정확하게 관리하여 기초데이터의 신뢰성을 확보하는 것이 필요하다. 비용과 업무 측면의 성과측정에 요구되는 기초데이터는 초기개발비, 추가 개발비, 유지보수비, 운영비, 시스템 유형, 접속자 수, 데이터 업데이트 수, 응용기능, 응용기능 활용현황, 사용자 만족도(편의성) 조사결과, 업무성과목표 등의 자료이다.

(9)

17 16

[그림 5] 운영 성과측정에 필요한 기초데이터

비용

운영의 적정성

업무수행 영향도 유지의 용이성

사용상의 편의성 비용의 효율성

업무성과 달성도 업무

측정

관점 측정항목

누적 유지보수비 비율

투입 운영유지비용 증감률

평균 운영유지비용 증감률

기능 활용도

사용 편의성

업무성과 증감률

목표대비 업무성과달성도

측정지표 기초데이터

초기개발비 추가개발비 유지보수비 운영비 시스템 유형

접속자 수 데이터 업데이트 수

응용기능

응용기능 활용현황(접속건수, 데이터량) 사용자 만족도(편의성) 업무성과목표, 지표별 결과

비용 측면의 기초데이터를 범정부 EA포털(GEAP)에 입력하여 관리하고 GEAP내 정보시스템 운영 성과측정 기능을 사용하여 측정하는 경우 비용측면의 기초데이터는 운영 성과측정 시 자동 반영됨

2.2.2 기초데이터 확보방안

비용 측면의 기초데이터는 집행 금액이 아닌 예산 금액을 기준으로 산정한다. 집행 금액은 측정과 관리가 어렵고 조달 가격의 확정과 집행 과정에서 변동이 발생할 수 있으므로 계획 과정에서 수립된 예산을 기준으로 한다. 단, 예산 금액 파악이 어려운 경우 집행 금액으로 사용할 수 있다. 또한 예산에 포함되지 않은 예외 항목을 반영하기 위하여 일부 기초데이터를 추정할 수 있다.

업무 측면의 기능 활용도는 원칙적으로 기능점수(FP)를 관리해야 하지만 부득이 한 경우 기능정의서 또는 시스템 하위 메뉴의 기능 단위로 활용 여부를 측정할 수 있다. 그리고, 기능 활용도 자동 측정을 할 경우는 화면 단위 URI(Uniform Resource Identifier)를 기능 단위로 활용 할 수 있다. 사용자 편의성 측정을 위해 정기적으로 사용자 만족도를 조사하고, 업무성과달성도는

계획 시점에서 수립한 목표와 운영 시점의 실적을 정량적으로 측정할 수 있도록 데이터를 관리하여야 한다. 또한 업무성과증감률은 최근 4년간의 업무성과를 관리하여야 측정이 가능하다.

기관에서는 관련 기초데이터에 대해 [표 2]의 예시처럼 객관적인 근거자료를 관리하여야 한다.

행정자치부에서는 정보시스템 운영 성과측정의 정확성을 판단하기 위해 주요 근거자료 제출을 요구할 수 있다.

[표 2] 기초데이터 설명 및 근거자료

기초데이터 설명 근거자료 예시

초기개발비 정보시스템 개발 비용 예산금액 정보, 집행금액(정보시스템 구축 개발 계약서, 견적서, 업그레이드 계약서, 견적서 등)

추가개발비 정보시스템 추가 개발 비용 유지보수비 정보시스템 유지보수 비용

예산금액 정보, 집행금액(유지보수 계약서 등)

운영비 정보시스템 운영비

시스템 유형 시스템 유형 선택(대민/내부) 정보시스템 제안요청서, 구축완료 보고서 등

접속자수 1년 동안 접속한 접속자(이용자) 수

유지보수 담당자 또는 시스템 모니터링을 통해 수집한 접속자 수

데이터 업데이트수 1년 동안 DB 데이터를 업데이트한 수

유지보수 담당자 또는 시스템 모니터링을 통해 수집한 데이터 업데이트 수

응용기능 정보시스템 응용기능 입력 정보시스템 완료보고서(정보시스템 메뉴 구조도, 메뉴/기능 정의서 등) 참조

응용기능 활용 현황 활용/저활용/미활용 유지보수 담당자 또는 시스템 모니터링을 통해 수집한 접속건수, 데이터량 등

사용자 만족도 (편의성)

사용자만족도 또는 사용편의성점수(100점 만점)

사용자 만족도 조사 결과서 사용자 편의성 조사 결과서

업무성과목표

업무성과 목표(정량목표) 업무성과 달성 (정량적 달성 결과)

정보시스템 구축사업 계획서 기관별 성과계획/보고(중앙행정기관) 재정사업 자율평가 보고서

3. 측정 항목

비용 측면에서는 운영의 적정성, 유지의 용이성, 비용의 효율성을 측정하고, 업무 측면에서는 업무수행 영향도, 사용상의 편의성, 업무성과 달성도를 측정한다.

(10)

19 18

3.1 비용 측면

비용 측면은 정보시스템 운영 및 유지보수에 소요되는 비용의 전체적인 규모, 증감수준, 활용규모에 비해 적절하게 투입되고 있는지를 정량적으로 측정하며, 측정결과에 따라 비용 효율성을 높이기 위한 정보시스템 구조개선 등 재개발 여부를 판단한다.

[표 3] 비용측면의 측정 항목 및 지표

측정항목 정 의

운영의 적정성 누적된 유지보수비가 총 개발비의 일정비율을 초과한 경우 비용개선을 위한 노력이 필요한지를 판단하기 위한 항목

유지의 용이성 투입 운영·유지비의 증감 수준을 분석하여

정보시스템이 비용 효율적 구조를 유지하고 있는지를 판단하는 항목

비용의 효율성 정보시스템의 활용규모 대비 비용 효율적 구조를 유지하고 있는지를 판단하는 항목

3.2 업무 측면

업무 측면은 업무수행 영향도, 사용상의 편의성, 업무성과 달성도 등을 분석하여 정보시스템의 서비스 및 업무지원이 효율적으로 이루어 있는지를 정량적으로 측정하며, 측정결과에 따라 정보시스템의 서비스 및 업무지원 강화 등 기능고도화 여부를 판단한다.

[표 4] 업무측면의 측정 항목

측정항목 정 의

업무수행 영향도 업무지원 효율성 제고를 위한 기능 개선 및 고도화가 필요한지 판단하는 항목

사용상의 편의성 사용자의 정보시스템 활용 편의성 제고를 위한 기능개선이 필요한지를 판단하기 위한 항목

업무성과 달성도 업무성과 제고 및 최초 구축 시점의 목표달성을 위해 기능 개선 및 고도화가 필요한지를 판단하기 위한 항목

4. 측정 지표

4.1 측정 지표 정의

비용 측면의 측정 지표는 누적유지보수비 비율, 투입 운영 유지비 증감률, 평균 운영유지비 증감률, 업무 측면의 측정 지표는 기능활용도, 사용편의성, 목표대비 업무성과 달성도/업무성과 증감률로 구성되어 있으며 [표 5]에서 관점별 측정 지표를 정의하고 있다.

[표 5] 측정 지표 정의

측정관점 측정 지표 정 의

비용

누적유지보수비 비율 정보시스템 개발에 소요된 총 금액 대비 연간 정보시스템 유지보수비 누계의 비율을 측정

투입 운영유지비 증감률 정보시스템 운영과 유지보수를 위하여 요구되는 비용의 증감률을 측정

평균 운영유지비 증감률 활용규모 당 평균 운영유지비의 증감률을 측정 (최근 3년, 초기 3년)

업무

기능활용도 업무지원 및 서비스 제공을 위해 구현된 기능의 활용

수준을 측정

사용 편의성 정보시스템 활용 시 사용자가 느끼는 편의성을 측정

목표대비 업무성과

달성도 (Option 1) 직전 연도 성과 목표 대비 업무성과의 달성수준을 측정 업무성과 증감률

(Option 2) 최근 3년 평균 업무성과의 증감률을 측정

4.2 비용 측면 측정

4.2.1 기초데이터 정의

기관에서 비용 성과측정을 위해서 관리해야 하는 기초데이터는 정보시스템 개발비 (초기개발비, 추가개발비), 매년 투입되는 운영비, 유지보수비이다. 비용 외에도 정보시스템 유형별로 적합한 활용 규모의 파악이 필요하다.

▶ 정보시스템 개발비

정보시스템을 개발하는데 소요되는 비용으로 초기개발비와 추가개발비를 포함한다.

(11)

21 20

정보시스템 개발비는 소프트웨어 개발비와 정보시스템 개발과 직접적으로 관련된 컨설팅 비용(BPR/ISP) 등을 포함한다.

- 초기개발비는 정보시스템을 신규로 개발한 해에 투입된 정보시스템 개발비이다.

- 추가개발비는 초기 개발 이후 추가적으로 개발한 정보시스템에 투입된 비용을 의미한다.

기존에 구축된 기능에 대한 일상적인 유지보수 범위를 초과하는 변경이나 새로운 업무 영역에 대한 기능의 개발 비용은 추가개발비로 분류한다.

- 원칙적으로 개발비에는 HW 및 상용SW의 도입 비용이 포함되지 않는다. 단, 개발비 중 HW 및 상용SW 도입비용이 분리되지 않아 해당 비용을 포함하여 지표에 적용하는 경우에는 운영·유지보수비에도 HW 및 상용SW 관련 비용을 포함하여야 한다.

▶ 유지보수비

유지보수비는 개발한 정보시스템을 보다 편리하게 활용할 수 있도록 유지하고 관리하는 활동에 소요되는 비용을 의미한다. 일상적인 유지보수의 범위를 초과하여 소프트웨어의 일부를 다시 개발하거나 추가 개발하는 경우는 재개발이나 추가개발로 보고 유지보수비에 산입하지 않는다.

[유지관리 업무의 분류]

•

데이터의 정확도 개선

•

사용자 인터페이스 개선

•

평균 응답시간의 개선 등

•

소프트웨어 변경(환경 변화에 대응 등)

•

데이터 변경

•

운영환경의 변경 등

•

프로그램 비정상 종료의 수정

•

부적당한 정보를 출력하는 처리상의 에러 수정

•

트랜잭션의 에러 발생 등 프로그램, 표준기준에 부적합 사항 보완

•

기능사양과 설계내용이 일치되지 않을 경우 소프트웨어 작성에러 수정 [출처 : SW사업 대가 산정 가이드]

▶ 운영비

정보시스템에 대한 유지보수를 제외한 운영기획 및 관리, 모니터링, 테스트, 사용자 지원을 포함한 정보시스템의 정상적 운영에 필요한 제반활동에 소요되는 비용을 의미한다.

[운영업무의 분류]

•

소프트웨어 운영서비스 계획수립 및 시행

•

소프트웨어 이상 유무 점검(모니터링, 장애예방, 장애관리)

•

고객요구에 따른 전산자료 출력지원

•

데이터 백업, 보관, 삭제 등에 관한 계획수립 및 시행

•

배치작업 또는 정기적 작업 수행과 결과확인 및 조치

•

사용자 교육

•

안내데스크(Helpdesk) 운영

•

운영업무와 관련된 보고 및 회의(정기, 비정기, 업무 협의)

•

소프트웨어 운영 품질관리(품질시스템관리, 품질표준정의, SLA관리 등)

•

네트워크 운영 : 네트워크 설비관리, 망 운영 및 관리 등

•

시스템 관리 : 시스템 SW 관리, HW 운영 등 [출처 : SW사업 대가 산정 가이드]

▶ 활용규모

활용규모란 정보시스템의 활용 정도나 범위를 정량적으로 산정한 것으로 정보시스템의 특성에 따라 활용규모를 선정할 수 있다. 일반적으로는 [표 6]의 정보시스템의 이용자 수, 관리 정보량(정보시스템에서 관리하는 전체 정보 건수 또는 정보 사이즈 등), 데이터 량 (정보시스템 내 주요 데이터에 대한 데이터 건수 또는 데이터 사이즈 등), 연계 시스템 수, 사용 기관 수, 데이터 업데이트 수, 활용 기능 수 등을 선택하여 사용한다. 정보시스템은 사용자나 운영 목적, 활용 주기 등에 따라 활용규모가 적합하지 않은 경우가 있으므로 해당 정보시스템의 유형을 검토하여 가장 적합한 활용규모를 선택할 수 있다.

[표 6] 정보시스템의 유형에 적합한 활용규모

분류기준 정보시스템 유형 정보시스템에 대한 정의 주요 특징 적합한 활용규모변수

사용자에

의한 분류 내부 시스템

직원 복지, 성과관리, 인사 관리,

내부 업무 관리 등과 같이 내부 직원이 내부 업무를 위해 사용하는 정보시스템

• 이용자 수의 변동이 적음

• 외부인의 접근 어려움

• 관리 정보량

• 데이터 량(연간)

• 연계 시스템의 수

• 활용 기능 수

사용자에

의한 분류 대민 시스템

국민을 대상으로 정보 제공, 민원처리, 질의응답 등 국민생활 전반에 필요한 서비스를 제공하는 정보시스템

• 다양한 분야에서 불특정 다수의 이용자가 누구나 활용 가능함

• 이용자 수조회 건수

• 조회 건수

• 다운로드 건수

(12)

23 22

분류기준 정보시스템 유형 정보시스템에 대한 정의 주요 특징 적합한 활용규모변수

사용 목적에 따른 분류

처리용 시스템

행정 업무 수행, 민원 처리, 비용 계산, 정보 수집 및 저장 등과 같이 업무 처리의 목적을 가진 시스템

• 이용자 수의 변동이 적음

• 기관간 정보연계를 통해 업무 편의성을 높일 수 있음

• 관리 정보량

• 데이터 량

• 사용 기관 수

• 연계 시스템의 수

• 연계 기관 수

분석용 시스템

정보 분석에 활용하기 위한 통계 분석, 마이닝, 지식 생성 및 제공, 의사결정 지원 등의 서비스

• 활용주기가 일정하지 않음

• 정보의 품질이 중요함

• 의사결정 지원 건수

• 연구논문/특허 출간 건수

• 분석결과 조회 건수

• 다운로드 건수

정보제공 시스템

업무 연락, 그룹웨어, 홈페이지, 블로그 등과 같이 커뮤니케이션 및 단순 정보를 제공하는 서비스

• 이용자 수, 이용 기관 등의 증가를 통한 활성화가 필요함

• 이용기관 수

• 이용자 수

• 조회 건수

4.2.2 기초데이터 추정

▶ 일부 기초데이터가 없는 경우

비용 측면의 지표인 누적 유지보수비 비율, 투입 운영유지비용 증감률, 평균 운영유지비용 증감률 지표는 공통적으로 연도별 유지보수비 데이터가 필요하다. 이외에 개발비 (초기개발비, 추가개발비), 운영비, 활용규모 데이터가 연도별로 관리되고 있을 때 비용 측면의 성과를 정확하게 측정할 할 수 있다. 원칙적으로는 예산을 기준으로 산출하나 기관에서 비용 측면의 성과를 측정할 때, 특정년도의 기초데이터가 일부 누락되었을 경우 해당 정보시스템의 평균 등을 통해 그 값을 추정하여 산출할 수 있다.

기관에서는 다양한 예외 사항에 대하여 사례 등을 참고하여 추정한다.

[데이터 추정 사례] - 누적 유지보수비 비율 산정 시 적용

• 유지보수비 예산만 있고 운영비가 없는 경우

: 운영 활동이 실제로 수행되고 있으나 운영비가 유지보수비에 포함된 경우 해당 정보시스템에 대한 운영비를 SW대가산정 기준에 의거하여 추정하고 유지보수비에서 운영비만큼 빼고 산정

유지보수비(추정값) = 유지보수비(예산) - 운영비(추정값)

운영비(추정값) = SW대가산정 기준에 의거 추정

• 운영비만 있고 유지보수비가 없는 경우

: 유지보수 활동이 실제로 수행되고 있으나 유지보수비가 운영비에 포함된 경우 해당 정보시스템 의 평균 유지보수요율에 따라 산정하고 운영비에서 유지보수비만큼 빼고 운영비 재산정

운영비(추정값) = 운영비(예산) - 유지보수비(추정값)

유지보수비(추정값) = 해당 정보시스템 평균 유지보수요율^{1 )} 또는 기관의 평균^{2 )} 적용

• 유지보수 예산이 전체 개발비의 15%

³⁾

를 넘는 경우

: 유지보수의 예산이지만 추가 개발 비용까지 포함된 경우에는 해당 정보시스템의 평균 유지 보수요율 기준으로 유지보수비를 추정하고 남은 부분은 추가개발비로 계상

추가개발비(추정값) = 유지보수비(예산) – 유지보수비(추정값)

• 예산에 추가개발비만 있고 유지보수비가 없는 경우,

: 매년 개발 또는 고도화가 진행된 경우는 최초 개발년도 + 2년 시점부터는 추가개발비에 유지 보수비가 포함된 것으로 간주함

: 추가개발비 예산에 유지보수비까지 포함된 경우에는 해당 정보시스템의 평균 유지보수요율

⁴⁾

에 따라 유지보수비를 추정하고 남은 부분을 추가개발비로 계상

유지보수비(추정값) = 유지보수요율에 따라 추정

추가개발비(추정값) = 추가개발비(예산) – 유지보수비(추정값)

1 ) 해당 정보시스템에 대한 유지보수비가 산정된 이력이 있는 경우는 해당 정보시스템에 적용된 유지보수비요율의 평균을 적용함 2) 유지보수요율을 한 번도 적용한 적이 없는 경우는 유지보수 난이도에 따라 개발비의 10~15% 적용

(SW대가산정기준에 의해 개발비의 10~15%를 유지보수비로 산정)

3) 지나치게 높은 유지보수요율이 적용된 경우는 유지보수비가 아니라 추가개발비로 적용함. 단, 명확한 사유에 의해 발생된 비용이나, 일부 특정 소프트웨어 유지보수요율이 15%를 넘는 경우는 해당되지 않음

4) 정보시스템의 평균 유지보수요율 : 유지보수 횟수, 자료처리 건수, 타 시스템 연계, 실무지식 필요, 분산처리 여부의 5개 항목에 대해 점수화 (단순, 보통, 복잡) 하여 합산한 유지보수 난이도 점수로 도출함(유지보수요율 : 유지보수 난이도 점수×5%+10%)

※ 평균 유지보수요율 : 해당 정보시스템의 유지보수 기간 동안 적용하였던 평균 유지보수요율을 말함

(13)

25 24

▶ 기초데이터가 전혀 없는 경우

기관 내부의 직원이 직접 개발·운영·유지보수 하는 경우 개발 비용은 파악이 어려우므로 현재의 성과측정 모델을 적용하기 어렵다. 이러한 경우 4.2.3 비용측면 측정방법에서 제시하는 간편 측정 방법을 적용하여 측정할 수 있다.

4.2.3 측정방법

1) 운영의 적정성

운영의 적정성은 누적된 유지보수비가 개발비의 일정비율을 초과할 경우 해당 정보시스템의 재개발 등을 통해 비용 효율성 개선을 위한 노력이 필요한지를 판단하기 위한 항목이다.

정보시스템 개발에 소요된 총 금액 대비 정보시스템의 유지보수비를 누계한 비율을 측정하기 위해 초기개발비, 추가개발비, 연도별 유지보수비 데이터를 적용하여 계산한다.

측정 지표 누적 유지보수비 비율

지표정의 정보시스템 개발에 소요된 총 금액 대비 연간 정보시스템 유지보수비 누계의 비율을 측정

측정방법

∑ 정보시스템 유지보수비

정보시스템 개발비 X 100%

• 정보시스템 개발비 : 초기개발비 ＋ 추가개발비

• 정보시스템 유지보수비 : 정보시스템 개발·구축 완료 이후에 정보시스템 개선 활동(기능변경, 추가, 보완, 폐기, 사용방법의 개선, 문서 보완 등)에 지출되는 비용 (「예산안 편성 및 기금운용계획 작성 세부지침(기획재정부)」의 개발SW 유지보수비에 해당)

적용 예시

(예) 2010년 10월에 최초 구축된 정보시스템 A를 2017년에 성과측정 - 추가 개발비용 : 2012년 500백만원, 2014년 500백만원 - 추가 개발비용 : 2012년 500백만원, 2014년 500백만원

- 유지보수비 : (2011년 무상유지보수), 2012년부터 2013년까지 연간 100백만원, 2014년부터 2015년까지 150백만원, 2016년 200백만원

- 누적 유지보수비 비율 : [(100+100+150+150+200)/(1,000+500+500)] X 100 = 35%

측정 지표 누적 유지보수비 비율

적용기준

• 두 개 이상의 정보시스템을 통합하여 새로운 시스템으로 구축 한 경우에는 통합시점을 최초 개발 연도로 적용하고, 통합비용을 초기 개발비용으로 적용함

(예) A, B정보시스템이 2011년 C시스템으로 통합 된 후, C시스템으로 예산이 발생하는 경우 → 최초 구축 연도 : 2011년, 최초 구축비용 : C 시스템 통합 구축비용

• 두 개 이상의 정보시스템을 통합하였으나, 통합 이후에도 유지보수비를 통합 전 각각의 시스템으로 예산을 배정 받는 경우에 해당 시스템의 유지보수비는 이전의 두 개 시스템에 대한 유지보수 비용을 합산하여 적용함

(예) A, B정보시스템이 2011년 통합 된 후, A, B 시스템으로 예산이 발생하는 경우 → A, B 시스템 각각의 기준을 적용하여 합산

• 정보시스템 재구축이 발생한 경우에는 재구축 시점을 최초 구축 연도로 적용하고, 재구축 비용을 최초 구축비용으로 적용함

※ 재구축 인정 조건 : 현행 정보시스템의 전체 또는 핵심 기능의 상당부분을 폐기하고 신규로 개발하는 사업인 경우

• 통합이나 분리의 수준이 단순히 예산 측면의 통합이나 장비의 공동 활용수준의 경우에는 통합으로 판단하지 않음

▶ 간편 측정 방법

간편 측정 방법은 기관 내의 직원이 직접 개발하여 운영 및 유지보수를 수행하는 경우나 데이터 추정이 어려운 경우 활용한다. 간편 측정 방법을 사용하는 때에는 반드시 타당한 근거와 사유를 제시하여야 한다.

측정 지표 누적 유지보수비 비율

지표정의 정보시스템 개발에 소요된 총 금액 대비 연간 정보시스템 유지보수비 누계의 비율을 측정

측정방법 정보시스템의 연식 = 당해 연도^* - 개발 연도

* 당해 연도는 측정 연도의 직전 연도 (예: 2017년 측정 시, 당해 연도는 2016년)

적용예시

(예) : 연식이 5년인 경우 환산 점수는 5점

• 환산 점수는 5점

환산점수 정보시스템 연식

5점 6년 미만

4점 6 ~ 9년 미만 3점 9 ~ 11년 미만 2점 11 ~ 13년 미만 1점 13 이상

(14)

27 26

2) 유지의 용이성

유지의 용이성은 투입되는 운영·유지비의 증감 수준을 분석하여 해당 정보시스템 유지 용이성을 판단하기 위한 항목이다.

투입 운영유지비용 증감률을 측정하기 위해 초기 3년간의 운영비, 유지보수비, 최근 3년간의 운영비, 유지보수비를 직접 적용하여 계산한다.

운영·유지 보수비에 HW, 상용SW 운영·유지 보수비 구분이 안될 경우 최근 3년, 초기 3년의 HW, 상용 SW 운영보수비를 포함하여 계산한다.

측정 지표 투입 운영유지비용 증감률

지표정의 정보시스템 운영과 유지보수를 위하여 요구되는 비용의 증감률을 측정

측정방법

최근 3년 평균 운영 유지비 - 초기 3년 평균 운영 유지비

X 100%

초기 3년 평균 운영 유지비

운영유지비 : 운영비 + 개발SW 유지보수비

- 운영비 : 사용자가 정보시스템을 원활하게 사용할 수 있도록 지원하는 활동에 제공되는 비용 (「예산안 편성 및 기금운용계획 작성 세부지침(기획재정부)」의 정보시스템 운영비에 해당) - 초기 3년 평균 운영유지비 : 최초 운영유지비가 발생한 해를 포함하여 3개년 평균 운영유지비 - 최근 3년 평균 운영유지비 : 측정 직전 연도 포함 3개년 평균 운영유지비

적용예시

예) 2009년에 구축된 A 정보시스템 (2017년 측정)

- 연간 운영유지비 : 2010년(무상유지보수), 2011년(100백만원), 2012년(100백만원), 2013년(100백만원), 2014년(120백만원), 2015년(120백만원), 2016년(120백만원) - 초기 3년 평균 운영유지비(2011년∼2013년) : (2010년은 무상유지보수) 100백만원 =

(100백만원 + 100백만원 + 100백만원) / 3 - 최근 3년 평균 운영유지비(2014년∼2016년) :

120백만원 = (120백만원 + 120백만원 + 120백만원) / 3

- 투입 운영유지비용 증가율 : 20% = [(120백만원－100백만원) / 100백만원] X 100%

적용기준

초기 3년 평균 운영유지비와 최근 3년 평균 운영유지비 계산 시 고려할 사항 1 ) 무상유지보수 기간 : 무상유지보수 기간은 초기 3년 운영유지보수 기간에서 제외 2) 초기 3년의 기간과 최근 3년의 기간이 겹치는 경우 (유상 운영유지보수 기간이 6년 미만)인

경우 : 겹치는 기간만큼 중복으로 적용

측정 지표 투입 운영유지비용 증감률

적용기준

3) 최초 유상 운영유지보수가 연중에 발생할 경우 초기 1년은 최초 유상 운영유지보수가 발생한 차년도로 산정함 (예 : 최초 유상 운영유지보수 발생 시점이 2010.08인 경우 → 초기 1년은 2011년)

예 : 2017년(측정시점)

- 2011년 구축, 2012년 서비스 개시(2012년 무상유지보수 기간) - 유상유지보수 기간 : 4년(2013년, 2014년, 2015년, 2016년 인 경우) - 초기 3년 : 2013년, 2014년, 2015년

- 최근 3년 : 2014년, 2015년, 2016년

▼ 서비스개시

구축년도



무상유지보수

 초기 3년

6년, 7년 경과 5년 경과

데이터가 겹침

최근 3년 최근 3년

데이터가 있는 경우

- 겹치는 기간 : 2013년, 2014년(2년간)

간편 측정은 운영 초기의 운영유지보수 비용 대비 최근의 운영 유지보수비 변동 비율을 파악하도록 투입공수를 이용한 M/M(Man-Month)방식의 간편한 산식을 적용하도록 하였다.

간편 측정을 사용하는 때에는 반드시 타당한 근거와 사유를 제시한다.

측정 지표 투입 운영유지비용 증감률

지표정의 정보시스템 운영과 유지보수를 위하여 요구되는 비용(M/M)의 증감률을 측정

측정방법

최근 운영유지 M/M - 운영 초기 운영유지 M/M

X 100%

운영 초기 운영유지 M/M

•최근 운영유지 M/M : 최근 3년간 운영 유지보수에 투입된 연 평균 M/M

•운영 초기 운영유지 M/M : 운영 초기 3년간 운영 유지보수에 투입된 연 평균 M/M

• 운영 초기의 운영유지 비용 대비 최근의 운영 유지보수 비용의 변동 비율을 측정하여 유지의 용이성을 파악한다.

적용예시

(예) 투입 운영유지비용 증감률 - 최근 운영유지 M/M : 6 - 운영 초기 운영유지 M/M : 5

- 투입 운영유지비용 증감률 : 20% = (6-5)/5 X 100%

(15)

29 28

3) 비용의 효율성

비용의 효율성은 정보시스템의 활용규모 변동에 따른 운영·유지비 규모 변동의 적절성과 효율적인 비용 활용수준을 판단하기 위한 항목이다.

평균 운영유지비용 증감률은 활용규모 대비 운영유지비용의 증감률로, 측정을 위해서 측정 기간 동안의 활용규모, 초기 3년간의 운영비, 유지보수비, 최근 3년간의 운영비, 유지보수비 정보가 요구된다. 활용규모 데이터는 해당 정보시스템의 특성을 고려하여 선택할 수 있다.

[표 6]에서 제시한 정보시스템의 유형별 활용규모 목록을 참고하여 활용규모 대상 유형을 선정하여 적용한다.

운영·유지 보수비에 HW, 상용SW 운영·유지 보수비 구분이 안될 경우 최근 3년, 초기 3년의 HW, 상용 SW 운영보수비를 포함하여 계산한다.

측정 지표 평균 운영유지비용 증감률

지표정의 활용규모 당 평균 운영유지비의 증감률을 측정(최근 3년, 초기 3년)

측정방법

최근 3년간 평균 활용규모당 운영유지비 – 초기 3년간 평균 활용규모당 운영유지비 X 100%

초기 3년간 평균 활용규모당 운영유지비

•활용규모당 운영유지비 : 연간 운영 유지비용/연간 활용규모

•운영유지비용 : 운영비 + 유지보수비

•초기 3년 : 구축(서비스 개시) 후 유상 유지보수를 수행한 3개년(무상 유지보수 기간은 제외)

•최근 3년 : 측정 직전 연도를 포함한 3개년

적용예시

(예) 2009년 구축 후 운영이 시작된 A 정보시스템 (2017년 측정) - 활용규모 : 이용자 수 적용

- 연간 운영유지비 : 2010년(무상유지보수), 2011년(100백만원), 2012년(100백만원), 2013년(100백만원), 2014년(120백만원), 2015년(130백만원), 2016년(130백만원), - 연간 활용규모 : (이용자 수를 활용규모 기준으로 측정) 2011년(11만명), 2012년(12만명),

2013년(12만명), 2014년(13만명), 2015년(13만명), 2016년(14만명) - 초기 3년(2011년~2013년) 평균 이용자 1인당 운영유지비 :

858.5 = [(100백만원/11만명)+(100백만원/12만명)+(100백만원/12만명)]/3 (2009년은 무상유지보수로 제외)

- 최근 3년(2014년 ∼ 2016년) 평균 이용자 1인당 운영유지비 :

950.5 = [(120백만원/13만명)+(130백만원/13만명)+(130백만원/14만명)]/3 (2017년은 측정시점이므로 제외)

- 평균 운영유지 비용 증감률 : 10.7% = [(950.5 – 858.5) / 858.5] ×100

적용기준

활용규모 : 이용자 수, 관리 정보량, 데이터 량, 연계 시스템의 수, 사용 기관 수, 데이터 업데이트 수, 조회 건수, 다운로드 수, 의사결정지원 건수, 분석 건수 등 시스템 특성에 맞는 대상을 선택 또는 지정하여 적용

비용 데이터를 확인하기 어려운 경우 투입된 M/M(Man-Month)를 적용하여 계산한다.

산식은 비용 정보 대신 운영과 유지보수에 투입된 M/M 정보를 적용한다. 측정을 위해서는 개발 초기와 최근의 평균 M/M, 활용규모 대상 유형을 선정하는 것이 필요하다. 간편 측정을 사용하는 때에는 반드시 타당한 근거와 사유를 제시하여야 한다.

측정 지표 평균 운영유지비용 증감률

지표정의 활용규모 당 평균 운영유지비(M/M)의 증감률을 측정(최근 3년, 초기 3년)

측정방법

최근 3년간 평균 활용규모당 운영유지 M/M - 초기 3년간 평균 활용규모당 운영유지 M/M

X 100%

초기 3년간 평균 활용규모당 운영유지 M/M

•활용규모당 운영유지 M/M : 연간 운영 유지 M/M/연간 활용 규모

•운영 유지 M/M : 운영 유지보수에 투입된 M/M

• 초기 3년 : 구축(서비스 개시) 후 유상 유지보수를 수행한 3개년 (무상 유지보수 기간은 제외)

•최근 3년 : 측정 직전 연도를 포함한 3개년

적용예시

(예) A기관 : 기관 내부 직원이 직접 운영 유지관리 수행, 2009년 8월에 구축 후 운영이 시작된 B 정보시스템 (2017년 측정)

- 활용규모 : 연계시스템 수 적용

- 연간 운영유지M/M: 2010년(12M/M), 2011년(12M/M), 2012년(12M/M), 2013년(13M/M), 2014년(14M/M), 2015년(14M/M), 2016년(15M/M) - 연간 활용규모 : (연계시스템 수 기준으로 측정) 2010년(10개), 2011년(11개),

2012년(12개), 2013년(12개), 2014년(13개), 2015년(13개), 2016년(14개) - 초기 3년(2010년~2012년) 평균 활용규모당 운영유지 M/M :

1.10 = [(12MM/10) + (12MM/11) + (12MM/12)]/3(기관 내부 직원 직접 운영으로 무상 없음)

- 최근 3년(2014년~2016년) 평균 활용규모당 운영유지 M/M :

1.08 = [(14MM/13) + (14MM/13) + (15MM/14)]/3(2017년은 측정시점이므로 제외) - 평균 운영유지 M/M 증감률 : (1.08 – 1.10) / 1.10 X 100% = -1.99%

(16)

31 30

4.3 업무 측면 측정

4.3.1 기초데이터 정의

기관에서 업무 성과측정을 위해서 관리해야 하는 기초데이터는 기능 활용도(구현된 기능, 활용 기능, 미활용 기능, 저활용 기능), 사용 편의성 점수, 업무성과달성도(이용률, 달성률, 증가율, 절감률, 처리율, 적발률 등) 데이터 조사가 필요하다.

▶ 기능 수

기능 수는 기능점수(FP: Function Point)를 산출하기 위하여 도출한 트랜잭션 측면의 기능 또는 기능정의서의 단위 기능, 메뉴 구조도의 최하위 메뉴 등에서 식별 가능한 단위(Unit)의 수를 말한다. 단, 기능활용도 자동 측정을 위한 SW 적용 시에는 화면 단위 URI를 기능 단위로 활용 가능하다.

활용 기능을 매년 파악하기 위해서는 전체 기능 대비 활용 기능의 목록을 비치하여 정기적으로 관리하는 것이 필요하다.

기관에서는 정보시스템 운영 성과측정 목적에 따라 ‘활용’, ‘저활용’, ‘미활용’의 기준을 사용 횟수 및 빈도 등을 정하여 적용 할 수 있다.

[표 7] 기능 수의 분류 및 정의

분류기준 정 의 측정방식

전체 기능 수

구현된 전체 기능 수는

직전 연도까지 구현된 전체 기능의 수

기능점수(FP), 기능정의서, 메뉴구성도 등에서 식별 가능한 단위(Unit)의 수 단, 자동화 SW 적용 시 화면 단위 URI의 수

활용 기능 수

활용 기능 수는 직전 연도에 실제 활용한 기능의 수 활용 기능 수 = 전체 기능 수 – (미활용 기능 수 + 저활용

기능 수)로 산정함 실제 활용 기능은 직전 연도의 정보시스템

로그 기록을 기준으로 기능별 사용 여부 를 적용하는 것을 원칙으로 하나, 로그 기록확인 어려운 경우에는 대상 기능에 연결된 DB의 로그 기록 등 정보시스템 운영자 및 담당자가 제시할 수 있는 객관적인 근거 등을 기준으로 적용

미활용 기능 수

업무 종료로 인해 사용하지 않는 기능의 수 또는 상시, 수시 또는 일일 단위로 발생하는 업무를 지원하는 시스템 중에서 사용되지 않은 기능의 수

저활용 기능 수

업무대비 사용이 저조한 기능의 수를 말한다. 상시, 수시 또는 일일 단위로 발생하는 업무를 지원하는 기능 중 연간 사용량이 저조한 기능과 이벤트성으로 발생하는 업무를 지원하는 기능 중 측정기간 동안 해당 이벤트가 발생하지 않아 사용되지 않는 기능(미활용기능)으로 판단되는 기능의 수

▶ 사용 편의성 측정 점수

사용 편의성은 정보시스템을 활용할 때 사용자가 느끼는 편의성 수준을 측정한 점수이다.

기관에서는 대민 서비스와 같은 외부 서비스 외에 내부시스템에 대해서도 정기적으로 편의성, 만족도 수준을 측정하고 그 결과를 관리하는 것이 필요하다.

▶ 업무성과

업무성과는 기관의 임무, 중장기 목표, 연도별 목표를 달성하기 위해 추진하는 업무의 집행과정 및 결과로서 발생하는 핵심산출(Output) 및 파급효과(Outcome)를 의미한다.

본 측정에서 사용되는 업무성과 달성도의 개념은 업무와 관련하여 정보시스템 운영으로 발생되는 파급효과로 제한하여 사용한다. 기관은 측정 시 그 파급효과를 경제성, 능률성, 효과성의 관점에서 가장 잘 나타낼 수 있는 지표를 선택하여 적용한다.

사업계획 수립 시 설정한 목표를 활용하며 업무 목표와 부합하는 지표를 적용하여야 한다.

시스템 구축 시 마련 된 성과지표가 있으면 사용이 가능하며 지표 선택 시 기관은 [표 8]의 예시 지표 중 적합한 것을 선택하거나 업무 및 정보시스템의 특성에 맞게 유사한 형태의 지표를 개발하여 사용한다. 다만, 해당 정보시스템의 업무성과로 인정받기 위해서 객관적인 근거자료를 관리하는 것이 필요하다.

[표 8] 운영 성과측정 지표(업무성과달성도) 예시

성과지표명 활용목적 측정산식

사전협의 수행률 정보화사업의 유사·중복성 방지를 위한 사전협의 수행 정도 측정

(사전협의 이행 건수 / 사전협의 대상 사업건수)

× 100%

업무처리 오류율 시스템 품질 (안정적 운영 ) 정도 측정이 필요한 경우

(업무처리 오류건수 / 연간 처리 업무 총 건수)

× 100%

웹표준화 준수율 웹 프로그램의 표준화 정보를 측정하는 경우

(웹표준 준수 프로그램 건수 / 총 프로그램 건수)

× 100%

(17)

33 32

성과지표명 활용목적 측정산식

클라우드화 지수 정보화사업 계획 시 클라우드 우선 검토 정책 반영 정도 파악

(클라우드 적용 시스템 건수 / 클라우드 적용 대상 시스템 건수) × 100%

업무처리시간 개선율

시스템 구축 (기능개선) 후 개선 성능을 측정하는 경우

(개선 전 처리시간 – 개선 후 평균속도처리시간) / 개선 전 처리시간 × 100%

정보시스템 구축 진척도

정보화 사업 구축 진척도 측정이 필요한 경우

사업계획 수립 진척률 × 가중치1 + 발주 및 업체선정 진척률 × 가중치2 + 구축 진척률 × 가중치3 + 시스템가동 완성률 × 가중치 4

사용자만족도

내부사용자, 외부고객 등 이해관계자 들을 대상으로 만족도 조사 결과를 적용하는 경우, 특정 대상고객의 서비스 평가가 필요한 경우

내·외부 고객을 대상으로 매년 만족도 조사

고객증가율

목표값의 상향 경향이 명확하여 추세치 반영이 가능한 경우, 대국민서비스의 서비스 범위 확대 수준 파악이 필요한 경우

(당해 년도 총 고객 수 – 전년도 총 고객 수) / 전년도 총 고객 수 × 100%

업무처리자동화율 업무 생산성 향상을 위한 수작업 비율 축소가 필요한 경우

시스템을 이용하여 처리한 업무(기능) 건수 / 업무 (기능) 총 건수 × 100%

서비스요청 (CSR)적기 처리율

사용자 서비스요청의 적기 처리율을 측정하여 IT 인력 운영의 적정성, 업무 생산성 수준 파악 등이 필요한 경우

∑CSR 적기 처리건수 / ∑CSR 처리건수 × 100%

시스템 장애 발생 시간

무장애 시간을 목표로 시스템안정성을 측정하는 경우

장애발생 누적 시간 – 연, 분기, 월, 일

시스템 응답속도 시스템 품질을 향상시키기 위한

시스템의 기능별 응답속도 측정 주요 시스템의 기능 (트렌젝션)별 응답속도 측정

시스템 가동률 서비스 품질 요소인 시스템 안정적

운영을 위한 시스템 가동율 측정 {1-(장애시간 / 가동시간)} × 100%

성과지표명 활용목적 측정산식

장애복구소요시간 발생된 장애건의 최단시간 장애복구

목표 달성을 위하여 소용시간 측정 일별, 주간별, 월별 평균 장애복구 소요 시간 측정

서비스 이용 증가율

서비스 또는 시스템별 이용자 수 증감율 측정이 필요한 경우

(해당년도 이용자 수 – 전년도이용자 수) / 전년도 이용자 수 × 100%

페이지뷰 수 증가율

전년도 대비 페이뷰 증가율 측정이 필요한 경우

(당해연도 페이지뷰 수 - 전년도 페이지뷰 수) / 전년도 페이지뷰 수 × 100%

정보공개 서비스 증가율

시스템 투명성 확보를 위하여 기관의 정보공개수 증감률이 필요한 경우

(해당년도 정보공개 총 건수 - 전년도 정보공개 총 건수) / 전년도 정보공개 총 건수 × 100%

보안 관련 지적 및 보안사고 발생

건수

기관의 보안사고 및 보안관련 상태 평가가 필요한 경우

연간 발생된 보안사고의 총 건수 연간 보안업무 관련하여 내 ·외부적으로 지적 / 확인된 건수

보안 조치

이행률 보안지적 건의 조치율 측정 홈페이지공격차단율 ×0.4+악성코드차단율 ×0.3 + 해킹메일차단율 × 0.2 + DDoS 차단율 × 0.1

사용자 정보화 교육 시간

정보시스템 사용자의 연간 정보화

교육 성과측정 정보시스템 사용자의 연간 정보화 전문 교육 시간

(18)

35 34

▶ 직전 연도 성과목표

정보시스템의 구축 계획 초기에 수립한 연차별 성과목표 중 측정 직전 연도의 성과목표를 의미한다. 계획 시점에 성과목표를 수립하지 않은 경우는 업무성과 증감률 지표를 활용한다.

그러나 계획 시점에는 성과목표가 수립되지 않았으나 기관의 성과관리 지침 또는 계획 등에 의하여 목표를 수립한 경우 직전 연도 성과목표로 인정할 수 있다. 또한 초기 계획이 현실과 전혀 맞지 않는 경우 수정 목표를 적용할 수 있다. 수정 목표는 내부 성과관리 지침 또는 계획에 의해 객관성을 인정받고 그 근거를 제시하여야 한다.

4.3.2 측정방법

1) 업무수행 영향도

업무수행 영향도는 업무지원 및 서비스 제공을 위해 구현되어 있는 기능 중 개선이 필요한 기능을 도출하여 기능 고도화 범위를 판단하기 위한 항목이다.

측정의 정확성을 위해 자동화 도구를 우선적으로 이용해야하며, 로그데이터, 기능 또는 화면 단위 사용률 등에 대한 증빙자료를 관리하여야 한다.

측정 지표 기능 활용도

지표정의 업무지원 및 서비스제공을 위해 구현된 기능의 실제 활용되는 수준을 측정

측정방법

• 기능 : 기능점수(FP)를 산출하기 위하여 도출한 기능, 기능정의서의 단위 기능 및 메뉴 구조도의 최하 메뉴 등

•구현된 전체 기능 수 : 해당 정보시스템의 기 구현된 전체 기능의 수

• 미활용 기능 수 : 업무 종료 또는 사용하지 않는 기능의 수 - 업무가 종료되어 전혀 사용되지 않는 기능

- 업무가 상시, 수시, 일일 단위로 다수 발생하지만 사용량이 일정수준(1%)보다 적게 사용 중인 기능

※ 예시에 사용된 비율은 기관 및 정보시스템 특성을 고려하여 기관에서 정하여 적용함

• 저활용 기능 수 : 업무 대비 사용이 저조한 기능의 수

- 업무가 상시, 수시, 일일 단위로 다수 발생하지만 사용량이 일정수준(1%)보다 적게 사용 중인 기능

- 월간, 연간, 이벤트성으로 발생하지만 사용량이 일정수준(10%)보다 적게 사용 중인 기능 ※ 예시에 사용된 비율은 기관 및 정보시스템 특성을 고려하여 기관에서 정하여 적용함

적용예시

• 기능의 사용량은 직전 연도 정보시스템 로그기록(DB 로그 포함)을 기준으로 측정하는 것 을 원칙으로 함 (단, 로그기록 등 정량적 측정이 불가한 경우, 정보시스템 운영자 및 담당 자가 제시할 수 있는 객관적인 근거 등을 토대로 정성적으로 측정할 수 있음) - 사용량 기준 값 : 정보시스템 운영 성과측정 목적에 따라 정보시스템 운영자 및

담당자가 정하여 적용함

• 기능의 업무빈도는 지침, 규정, 매뉴얼 등의 근거를 기준으로 기능별 해당 업무의 발생빈 도를 정성적으로 측정함

(예) A기관 대국민서비스 시스템의 기능활용도 측정 - ① 구현된 전체 기능 수 : 500개

- 사용량 기준 값 : 월 30회 (운영자 및 담당자가 정하여 적용할 수 있음) - 기능유형별 기능 수

② 미활용 기능 수 : 20개 ③ 저활용 기능 수 : 100개

- 기능활용도 = ①500개 - [②20개 + (③100개×30%)]

×100 = 90%

① 500개

2) 사용상의 편의성

사용상의 편의성은 정보시스템의 사용 편의성을 측정하여 편의성 제고를 위한 기능 개선 필요성을 판단하기 위한 항목이다.

구현된 전체 기능 수 - ( 미활용 기능 수 + 저활용 기능 수 × 30%)

X 100%

구현된 전체 기능 수

(19)

37 36

수 있다. 측정 대상 정보시스템에 대한 연차별 성과목표가 있는 경우 '목표대비 업무성과 달성도 (Option 1)'를 선택·활용하고, 연차별 성과 목표가 없는 경우 ‘업무성과 증감률 (Option 2)’

을 활용한다.

업무성과 달성도의 정확한 측정을 위해 성과지표를 2개 이상 사용할 수 있으며, 이 경우는 개별 지표별 업무성과 달성도를 산정한 후, 지표별 가중치를 고려하여 점수로 환산한다.

▶ 목표대비 업무성과 달성도(선택지표 1)

측정 지표 목표대비 업무성과 달성도(Option 1)

지표정의 직전 연도 성과 목표 대비 업무성과에 대한 달성도를 측정

측정방법

• 직전 연도 성과목표 : 정보시스템 구축 및 계획 시점에 선정한 연도 별 성과목표 중 직전 연도 성과목표

•직전 연도 실적 : 성과목표로 선정된 성과측정 대상의 직전 연도의 실적

• 업무성과 : 업무와 관련하여 정보시스템 운영으로 발생되는 파급효과(Outcome)를 경제성, 능률성, 효과성 관점에서 가장 잘 나타낼 수 있는 지표를 적용하며 최근 4년간의 업무성과 로서 [표 8]업무성과 지표 예시를 참조하여 해당 정보시스템이 지원하는 업무성과를 정량적으로 측정할 수 있는 지표를 사용한다.

적용예시

(예1) 목표 대비 업무성과 달성도 : 정보화를 통한 불만 해결

•정보화를 통한 불만 해결률(%) : 서비스 수준의 향상을 위해 불만 요인을 해결한 비율

•계산식 : 불만이 해결된 건수 / 전체 불만 건수 X 100%

- 2015년도 성과목표 : 35%

- 2015년도 실적 : 30%

- 목표대비 업무성과 달성도 : (30/35) x100 = 85.7%

(예2) 목표 대비 업무성과 달성도 : 업무처리 자동화

•업무처리 자동화율(%) : 연간 수작업 업무를 정보화를 통해 자동화한 업무처리 비율

•계산식 : 자동화 전환 업무 건수 / 수작업 업무 건수 x 100%

- 2015년도 성과목표 : 95%

- 2015년도 실적 : 87%

- 목표대비 업무성과 달성도 : (87/95) x 100 = 91.6%

(예3) 2개 이상 지표를 사용하는 경우 (예1 지표 40% , 예2 지표 60% 적용 시) 계산식 : 85.7x(40/100) + 91.6x(60/100) = 89.2%

(예4) 2개 이상 지표를 사용하는 경우 (예1 지표 80% , 예2 지표 20% 적용 시) 계산식 : 85.7x(80/100) + 91.6x(20/100) = 86.9%

직전 연도 업무성과 실적

X 100%

직전 연도 업무성과 목표

측정 지표 사용 편의성

지표정의 정보시스템 활용 시 사용자가 느끼는 편의성 수준을 측정

측정방법

•사용 편의성 측정 점수 : 사용 편의성 조사 결과 측정된 점수

•사용 편의성 측정 점수의 만점 : 사용 편의성 조사 항목의 점수 만점(척도)

적용예시

(예) 사용 편의성 조사 결과(3개 항목, 5점 만점의 척도) - 1 번 항목의 측정 점수 : 3점*, 항목의 만점 점수 : 5점(5점 척도) - 2번 항목의 측정 점수 : 5점*, 항목의 만점 점수 : 5점(5점 척도) - 3번 항목의 측정 점수 : 4점*, 항목의 만점 점수 : 5점(5점 척도) (*다수 조사자가 참여한 경우 점수의 평균)

- 전체 항목 측정 점수의 합 : 12점 = 3점 + 5점 + 4점 - 전체 항목 측정 만점의 합 : 15점 = 5점 + 5점 + 5점

적용기준

• 정보시스템의 고객만족도 등에서 사용 편의성을 측정하기 위한 항목을 제시하는 것을 권고

(예) 고객 만족도 조사 시 사용 편의성을 측정하기 위한 항목

3) 업무성과 달성도

업무성과 달성도는 업무성과 제고 및 최초 구축 시점의 목표 달성을 위해 기능 개선 및 고도화 필요성을 판단하는 항목이다.

업무성과 달성도 항목은 목표대비 업무성과 달성도 지표와 업무성과 증감률 지표를 선택할

∑ 사용 편의성 측정 점수

X 100%

∑ 사용 편의성 측정 점수의 만점

80% = ×100% 12점 15점

조사항목 사용 편의성 질문내용(예)

1. 활용의 명확성

(1) 정보시스템의 메뉴가 명확하게 구분되어 있는가?

(메뉴의 구성이 잘 되어있는가?)

(2) 정보시스템에서 지금 필요한 정보가 어디에 있는지 쉽게 알 수 있는가?

2. 조작 방법의 편리성

(1) 방금 전 방문했던 페이지로 쉽게 돌아갈 수 있는 구조인가?

(2) 정보시스템 서비스에 현재 나의 위치를 명확히 알 수 있는가?

3. 정보 접근의 용이성

(1) 정보시스템의 정보는 항상 일관성 있게 제시되는가?

(2) 정보시스템의 화면구성이 잘 되어 있어서 보기에 편리한가?

4. 사용 효율성

(1) 정보시스템의 응답 속도가 목표 대비 적정한가?

(2) 사용자의 업무를 단축할 수 있도록 프로세스를 효율적으로 설계하였는가?

정보시스템 운영 성과측정 매뉴얼

성과측정 매뉴얼

2017. 4.

정보시스템 운영 성과측정

매뉴얼

Ⅳ. 정보자원의 처분

Ⅴ. 운영 성과 관리 및 활용

붙임자료 참고자료

1. 목적 78

2. 정보자원 처리 절차 78

3. 정보자원 분리(Carve-out) 가능성 검토 78

4. 정보자원 재활용 가능성 검토 82

5. 정보자원 재활용 및 폐기 방안 86

1. 목적 98

2. 정보시스템 운영 성과관리 업무 추진 절차 98 3. 성과관리 조직 및 담당별 역할 101

4. 성과측정 결과의 제출 104

5. 성과측정 결과의 활용 105

<붙임> 정보시스템 운영 성과관리 지침 109

<참고 1> 세부기술요소 정의 및 예시 127

<참고 2> 하드웨어 규모산정 절차 141

<참고 3> 1차 및 2차 성과측정 예시(재개발) 158

<참고 4> 1차 및 2차 성과측정 예시(폐기검토) 178

<참고 5> 정보자원 처리 방안 예시 185

<참고 6> 물품관리 법정 서식 및 관련시스템 199

<참고 7> 모바일 앱 성과측정 지표 204

<참고 8> 정보시스템 운영 성과측정 FAQ 206

Ⅰ. 개 요 1. 목적 07

2. 매뉴얼의 구성 및 활용 07

3. 정보시스템 운영 성과관리의 이해 09

1. 목적 13

2. 1차 성과측정 절차 13

3. 측정 항목 17

4. 측정 지표 19

5. 척도환산 39

6. 유지관리 유형 결정 39

7. 폐기검토 유형 재분류 40

8. 범정부 EA 포털(GEAP) 활용 48

Ⅱ. 1차 성과측정

Ⅲ. 2차 성과측정 1. 목적 51

2. 2차 성과측정 절차 51

3. 정보자원 효율성 측정 52

4. 구축방안 정의 54

5. 투자 타당성 분석 63

6. 최종의사결정 76

1. 목적

2. 매뉴얼의 구성 및 활용

[그림 1] 매뉴얼 구성 체계

Ⅰ

개 요

1. 목적

2. 매뉴얼의 구성 및 활용

3. 정보시스템 운영 성과관리의 이해

Ⅰ. 개요 Ⅱ. 1차 성과측정 Ⅲ. 2차 성과측정

참고

붙임

Ⅳ. 정보자원의 처분 Ⅳ. 운영 성과관리 및 활용

▶

▶

▶

3. 정보시스템 운영 성과관리의 이해

[그림 2] 정보시스템 운영 성과관리 지침 지침 구성 및 주요 내용 총칙

지속적 관리

정보시스템 운영 성과의 측정

[그림 3] 정보시스템 운영 성과측정 모델

1차 성과측정 (유지관리 유형 분류)

2차 성과측정 (개선방안 마련)

비 용 측 면 업 무 측 면

1차 성과측정

1. 목적

2. 1차 성과측정 절차 3. 측정 항목 4. 측정 지표 5. 척도환산

6. 유지관리 유형 결정 7. 폐기검토 유형 재분류 8. 범정부 EA 포털(GEAP) 활용

Ⅱ

1. 목적

2. 1차 성과측정 절차

[그림 4] 1차 성과측정 개요 측정

대상

법적 근거 분석 재개발

통폐합 폐기 영향도 평가

통폐합 가능성 분석

측정

Ⅰ. 개 요 ^{1. 목적} ⁰⁷

Ⅲ. 2차 성과측정 ^{1. 목적} ⁵¹