신뢰성이란 둘 이상의 관찰자가 각기 관찰해서 동일한 결과를 얻을 수 있는 정도로, 즉 비교 가능한 독립된 측정방법에 의해 대상을 측정하는 경우 결과가 비슷하게 되는 것 을 의미한다. 이는 측정결과에 오차가 들어있지 않은 정도로, 변량에 대한 체계적 정보를 반영하는 정도를 나타낸다. 이러한 신뢰성 측정은 측정의 정확성과 결과의 일관성이 중요 하다. 보통 동일한 개념을 측정하기 위하여 여러 개의 항목을 이용하는 경우 신뢰도를 높 이기 위해 크론바하 알파계수(신뢰도계수)를 이용한 내적일관성 검증을 한다. 본 연구에 서는 내적일관성에 의한 신뢰도 검증을 이용하여 알파계수(신뢰성 계수)를 측정하였다.
일반적으로 사회과학분야에서는 알파계수는 0과 1 사이의 값을 가지며, 사회과학 자료의 경우 0.7 이상이면 비교적 신뢰도가 높은 것으로 보고 있다224).
한편, 타당성이란 측정하고자 하는 것을 실제로 측정해 내는 정도를 나타내는 것으로 그 평가방법에 따라 내용타당성, 기준에 의한 타당성, 개념타당성 등 3가지로 나누어진 다.225) 내용타당성이란 측정도구 자체가 측정하고자 하는 속성이나 개념을 어느 정도나 측정할 수 있는 가를 보여 주는 것으로서 측정하고자 하는 구성개념의 조작적 정의의 적 절성 여부를 판단하는 근거자료가 된다. 기준에 의한 타당성은 하나의 속성이나 개념의 상태에 대한 측정이 미래 시점에 있어서의 다른 속성이나 개념의 상태변화를 예측할 수 있는 정도를 의미한다. 개념타당성은 한 개념이 다른 개념과 구별되는 정도를 설명하는 것으로 요인분석을 통해 설문 자체의 타당성을 양적으로 평가할 수 있다. 요인분석시 요 인수의 결정은 일반적으로 고유값이 1을 기준으로 하였으며, 요인적재량은 .4 이상인 것
224) 채서일, 전게서, pp.250-251.
225) 채서일, 상게서, pp.250-251.
을 유의한 것으로 판단하였고, 요인의 회전방식은 직각회전방식을 이용하였다. 명칭선정
성 및 타당성을 분석한 결과는 <표 4-3>과 같다.
상의 값을 보여 분석에 이용하기에 무리가 없는 것으로 나타났다.
마지막으로 본 연구에서 사용된 성과변수들에 대한 신뢰성과 타당성을 검증한 결과는
<표 4-4>와 같다. 앞에서 언급한 바와 같이 재무적․비재무 차원에서 주관적 성과지표로 구성된 4가지의 변수들을 요인분석한 결과 단일차원으로 묶여 68.7%의 분산설명력을 보였으며, 신뢰도 계수도 .843으로 높아 분석에 이용하기에 무리가 없는 것으로 나타났 다.
<표 4-4> 성과요인의 신뢰성 및 타당성분석
요인명 변수명
성과 요인
적재량 공통성 아이겐
값
분산 설명력
신뢰도 계수
성과
긍정적인 평판을 얻는데 성공했다. .875 .765
2.746 68.7 .843
소비자 만족도를 높이는데 성공했다. .867 .752
핵심적인 서비스를 개발하는데 성공했다. .840 .705
연중 지속적인 수익을 창출하는데 성공했다. .723 .523