투고일_2019.02.10 심사기간_2019.03.02-18 게재확정일_2019.04.01
스마트 홈(Smart Home)앱 디자인의 사용성 평가 요인 중요도 분석
An Analysis of the Importance of the Usability Evaluation Factors for Smart Home App Design
이만, 충남대학교 대학원 디자인창의학과 / 김맹호(교신저자), 충남대학교 디자인창의학과
Li Man_Department of Creative Design, Graduate School of Chungnam National University /
Kim, Maeng Ho(Corresponding author)_Creative Design, Graduate School of Chungnam National University
차례 1. 서론
2. 문헌 고찰
2.1. 스마트 홈의 개념과 앱 디자인의 이해 2.2. 스마트 홈 앱의 사용성 평가 요인 2.2.1. 사용성의 개념과 영향을 미치는 요인
2.2.2. 스마트 홈 앱 특성을 고려한 사용성 평가 요인 2.2.3. 사용성 평가 요인 도출
3. 연구 방법
3.1. 조사 대상과 연구의 방법 및 절차 3.2. 델파이 기법
3.3. AHP 계층분석법
4. 결과 및 분석
4.1. 스마트 홈 앱의 사용성 평가 요인 선정 결과 4.1.1. 상위 요인 선정 결과
4.1.2. 하위 요인 선정 결과 4.2. 평가 요인 중요도 분석 결과 4.2.1. 상위 요인 분석 결과 4.2.2. 하위 요인 분석 결과
4.2.3. 복합가중치를 이용한 전체 하위 요인 분석
5. 결론 및 제언
참고문헌
스마트 홈(Smart Home)앱 디자인의 사용성 평가 요인 중요도 분석
An Analysis of the Importance of the Usability Evaluation Factors for Smart Home App Design
이만, 충남대학교 대학원 디자인창의학과 / 김맹호(교신저자), 충남대학교 디자인창의학과
Li Man_Department of Creative Design, Graduate School of Chungnam National University /
Kim, Maeng Ho(Corresponding author)_Creative Design, Graduate School of Chungnam National University
요약 사용성은 제품의 경쟁력의 핵심이며 효능을 측정하는 중요한 지표이다. 또한 사용성도 소비자의 선호도에 영향
을 미치고 재사용, 재방문 등을 가져올 수 있다. 따라서 스마트 홈 앱의 사용성을 높이기 위해 평가척도의 개발 이 필요하다. 이에 본 연구의 목적은 스마트 홈 앱의 사용성 평가 미치는 각 요인들을 도출하고 우선순위를 제 시하는 것이다. 이를 위해 본 조사에서는 33명 전문가 집단을 구성하여 델파이 기법과 AHP 계층분석법을 통하 여 그 요인을 도출하고 상대적 중요도 및 우선순위를 분석하였다. 첫째, 기존 선행연구 및 문헌조사를 토대로 도출된 18개 사용성 평가 요인을 바탕으로 전문가 집단을 구성하여 델파이 기법으로 적절한 평가 상위 요인을 선정하기 위한 1차 델파이 조사를 실시하고 8개(유효성, 효율성, 용이성, 오류 허용성, 만족도, 안전성, 연통성 (聯通性), 지능화) 상위 요인을 선정하였다. 둘째, 사용성 평가 하위요인 선정하기 위하여 1차 조사 결과를 바탕 으로 국내외 선행연구와 사용자 인터뷰 조사를 통해 총 38개를 수집하고, 2, 3차 델파이 조사를 거쳐 적절한 하위 요인을 선정하였다. 2차에서는 29개 선정하고, 3차 조사에서 최종 27개를 선정하였다. 셋째, 최종 선정된 상위 요인 8개와 하위 요인 27개 평가 요인들은 AHP 기법을 이용해 각 요인별 가중치와 우선순위를 산출하였 다. 상위 요인 분석결과를 살펴보면 ‘안전성’ 우선적으로 고려되어야 하는 것으로 평가 되었고 ‘유효성’, ‘용이 성’, ‘효율성’, ‘지능화’, ‘연통성(聯通性)’, ‘오류 허용성’, ‘만족도’의 순으로 평가 되었다. 전체 하위 요인의 우선 순위를 통한 분석결과를 살펴보면, ‘조작 유효’, ‘프라이버시 보호’, ‘융통성’, ‘인터랙션 안정’, ‘시스템 보안’ 상 대적 높게 나타났다. 본 연구 결과는 향후 스마트 홈 앱 디자인의 사용성을 평가하는데 있어서 우선적으로 고려 해야 사항이 무엇인지 중요한 시사점을 제시한다.
Usability is core to the competitiveness of a product and an important indicator of its effectiveness.
It also affects consumers' preferences and can lead to reuse, revisit, etc. so, it is necessary to develop an evaluation measure to increase the usability of smart home APP. Therefore, the purpose of this study is to derive the factors that affect the usability of smart home APP and to give priority to their importance. In this survey, 33 experts were organized to conduct an investigation and analysis using Delphi techniques and AHP. First, based on the 18 factors were derived from existing prior research and literature surveys, a group of experts was formed to conduct the first Delphi survey to select the appropriate up-factors for evaluation and eight (validity, efficiency, ease, error tolerance, satisfaction, safety, connectivity and intelligence) appropriate up-factors were selected. Second, based on the results of the first survey, a total of 38 sub-factors were collected through prior research and user interview surveys, after the 2nd and 3rd Delphi surveys the appropriate sub-factors were selected, in the 2nd round 29 sub-factors were selected and in the 3rd 27 were selected. Third, the final 8 up-factors and 27 sub-factors were weighted and prioritized for each factor by AHP. Looking into analysis results of up-factors,
‘safety’ judged to be preferentially considered and it was evaluated with the order of ‘effective’,
‘ease’, ‘efficiency’, ‘intelligence’, ‘connectivity’, ‘error tolerance’ and ‘satisfaction’. The analysis result through priority order of overall evaluation items seem to have the order of ‘operating effect’, ‘privacy protection’, ‘compatibility’, ‘interaction stability’ and ‘system security’. The results of this study provide important implications for assessing the usability of future smart home APP designs.
중심어
스마트 홈 앱 사용성 평가요인 델파이 기법 AHP
ABSTRACT Keyword
Smart Home APP Usability
Factors
Delphi Techniques AHP
1. 서론
사물인터넷 (Internet of Things, IoT)은 컴퓨터, 인터넷 및 이동통신망에 이어 또 한 번의 정보 산업 물결로 여겨지고 있으며, 사물인터넷 기술에 기반하는 스마트 홈의 시장이 크게 성장하고 있다. 시장 조사 기관인 Strategy Analytics 의 조사에 따르면 2018년에 전 세계 스마트 홈(장치, 시스템 및 서비스 포함)의 소비 지출총액이 960억 달러에 육박할 것으로 예 상되며, 2018~2023년에 연평균 성장률이 약 10%에 이를 것으로 예상된다. 2023년에는 1550억 달러로 증가할 것이다.1) 시장의 커다란 기회 속에서, 각국의 과학기술 기업들은 스마 트 홈 영역을 배치하여 각자의 표준으로 스마트 홈 플랫폼을 출시하고 있다.
스마트 홈 앱은 스마트 홈 시스템에서 중요한 구성 부분으로 이동 가능한 스마트 홈 시스템 관리 및 제어 방식이며, 사용자는 앱을 통해 스마트 장치에 대한 원격 제어 및 관리를 수행할 수 있다. 편리하고 빠른 조작방식은 사용자들에게 새로운 스마트 라이프 경험을 가져왔다.
영국 소비자의 스마트 홈 기기 사용 이유를 분석한 YouGov 설문에 따르면 원격조정은 소비자 가 스마트 홈 기기를 사용하는 중요한 이유 중의 하나이다.2) 소비자가 스마트 홈 앱에 대한 향후 지속적으로 관심을 위해서는 사용성을 고려한 연구가 중요해지고 있다. 사용성은 소비자 의 선호도에 영향을 미치고 재사용, 재방문 등을 가져올 수 있다.3) 따라서 스마트 홈 앱 디자인 의 사용성을 높이기 위해 평가척도의 개발이 필요하며, 평가척도를 통한 개선 접근 방안을 제언하고 개선이 가장 시급한 영향요인을 제시하는 것이다. 그러나 현재는 스마트 홈의 특성을 고려한 스마트 홈 앱 디자인의 사용성 평가에 대한 연구는 미비한 상태이다. 이에 본 연구에서 는 스마트 홈 앱에 대상으로 문헌 고찰과 선행연구 조사를 통해 평가 영향 요인을 수집하고 델파이 조사를 수행하여 스마트 홈 앱 디자인의 사용성 평가 영향을 미치는 적절한 요인을 선정하여 AHP 기법을 이용하고 평가요인 중요도를 산출한다. 본 연구 결과는 향후 스마트 홈 앱 디자인의 사용성을 평가하는데 있어서 우선적으로 고려해야 사항이 무엇인지 중요한 시사점을 제시하여 준다.
2. 문헌 고찰
2.1. 스마트 홈의 개념과 앱 디자인의 이해
스마트 홈은 가전제품을 비롯해 에너지 소비 장치, 보안기기 등 다양한 분야에서 모든 것을 통신망으로 연결하여 모니터링 및 제어할 수 있는 기술을 말한다.4) 스마트 홈은 컴퓨터, 네트 워크 통신, 자동 제어 등의 다양한 기술을 사용하여 생활과 관련된 각종 하위 시스템을 유기적 으로 결합하는 시스템으로 정의되는데, 가정생활의 안전성 및 사용 편의성을 향상시키고 친환 경적인 주거 환경을 이룬다. 스마트 홈은 전통적인 주거 기능뿐만 아니라 인간적인 생활 서비 스도 제공한다. 수동적으로 고정되어 있던 가정 설비를 ‘지능’이 있는 도구로 바꾸어 편안하고 삶의 질 향상과 비용 절감의 효과를 얻을 수 있으며 사람들의 생활방식을 최적화한다.
스마트 홈 앱은 이동 가능한 스마트 홈 시스템 관리 및 제어 소프트웨어로, 사용자가 스마트 홈의 앱을 통해 전체 주거 시스템에 대한 원격조작 및 제어를 수행할 수 있다. 사용자는 스마트 홈의 앱을 통해 언제 어디서나 제어하고 관리할 수 있으며 쉽고 편리한 조작방식으로 사용자에 게 새로운 경험을 가져왔다.
1) Atzori L, Iera A, 『Morabito G. The internet of things: 2018 Global Smart Home Market Forecast』, Computer networks, 2010, 54(15): 2787-2805.
2) https://www.boannews.com/media/view.asp?idx=74067&kind=3.
3) Lee, S. and Koubek, R. J.,『 The effects of usability and web design attributes on user preference fore-commerce web sites』, Computers in Industry, Vol.61, 2010, pp.329-341.
4) Mahmoudi, Othmane, and Abdelkader Belkhir,‘Extension of SIP Protocol for managing home networks’,In 2011 10th International Sysposium on Programming and Systems, IEEE, 2011, April,
2.2. 스마트 홈 앱의 사용성 평가 요인 2.2.1. 사용성의 개념과 영향을 미치는 요인
1970년대 말, 연구자들은 사용성(Usability) 의 개념을 제시하고 평가와 응용에 대한 연 구를 시작했다. Nielsen은 사용자 조작 심리 적 측면에서 사용성이 비교적 포괄적인 설명 을 제공하고 있다. 목적은 시스템 모델이나 제품이 소비자의 요구에 부합하는지를 측정 하기 위해 설계되었다.5)
User Professional’s Association(UPA)은 제품 개발 프로세스의 관점에서 사용성을 다 음과 같이 정의한다, 사용성은 비용을 절감 하고 설계한 제품과 도구를 사용자의 요구에 맞추기 위해 사용되는 제품 개발 방법이다, 모든 개발 과정에는 직접적인 사용자의 피드 백이 결합되어야 실행되는 것이다.6) 사용성에 대한 평가 영향 요인은 많은 문헌들에서 논의되 고 있어서 국제기준, 전문가 등에서 발표한 내용을 <표 1>과 같이 정리하였다.
2.2.2. 스마트 홈 앱 특성을 고려한 사용성 평가 요인
정확한 사용성 평가를 위해서는 각 제품과 서비스에 대한 해당 매체의 성격이나 시스템 의 특징에 따라 그 사용성 평가 기준이 정해 져야 한다. 따라서 본 논문에서 연구하고 있 는 스마트 홈 앱도 그 특징을 살펴보고, 이에 맞는 사용성 평가를 정립하고자 한다.
스마트 홈 앱이 가진 양방향성, 이동성, 능동 적인 사용이라는 특징을 고려한 사용성 요인 이 요구된다. 본 연구에서는 문헌 고찰로부 터 특성 요인을 <표 2>과 같이 제시한다.
2.2.3. 사용성 평가 요인 도출
본 연구는 스마트 홈 앱의 사용성 평가 요인 수집을 위해 문헌 고찰과 선행연구를 통한 사용성 기초 평가 요인 정리하였다(<표 1>참조), 추출된 요인 중에서 중복되고, 연관성 있는 요인을 정리해서 총 15개의 요인을 선별 하였다. 선별한 요인은 유효성, 효율성, 신뢰성, 용이성, 유연 성, 오류 허용성, 안전성, 매력성, 만족성, 접근성, 가치, 유용성, 사용성, 검색성, 사용자의 태도 에 비롯한다. 스마트 홈의 특성 요인은 연통성(聯通性), 편리화, 지능화 3개(<표 2>참조) 영역을 추가하고, 총 18개 평가 요인을 도출 하였다.
5) J. Nielson, 『Usability Engineering』, Morgan Press, Inc. 1993. p.121.
6) User Experience Professionals Association(UXPA), About UX , http://uxpa.org/resources/about-ux,2017/10/11 7) Jiang, Yuhang, 「Application Research of Intelligent Home base on Internet of Things Technology」, Beijing
University of Posts and Telecommunications, 2011, p.18.
8) 이일주, 「스마트홈 거주성능 평가도구 개발에 관한 연구」, 연세대학교, 석사학위논문, 2005, p.69.
9) Jiang, Yuhang, 「Application Research of Intelligent Home base on Internet of Things Technology」, Beijing University of Posts and Telecommunications, 2011, p.18.
전문가 사용성 평가 영향 요인
Jakob Nielsen(1993)
효율성/ 기억용이성/ 학습용이성/
오류 허용성/ 만족도 ISO 9241-11:1998 효과성/ 효율성/ 만족도 Preece,Rogers＆Sha
rp(1993)
유효성/ 효율성/ 안전성/ 기능성/
학습용이성/ 기억용이성
Shackel(1991) 효과성/ 학습용이성/ 유연성/
사용자 태도
Peter Morville(2005)
유용성/ 사용성/ 만족성/
발견가능성/ 접근가능성/ 신뢰성/
가치 Whitney
Quesenbery(2001)
효율성/ 기억용이성/ 학습용이성/
오류 허용성/ 흡인력
<표 1> 다양한 평가 영향 요인
특성 요인 내용
연통성7) (聯通性)
다른 브랜드, 시스템 및 플랫폼 간의 상호 호 환성(예: Windows, Android, IOS 등 시스템 간의 상호 호환 등), 또 PC, iPad 등 다른 단말기와 의 데이터 유통, 정보 교환은 동기화가 가능하 기도 한다.
편리성8)
사용자는 앱을 통해 스마트 홈에 대한 원격 조 작과 제어가 가능하고, 전반적인 시스템의 상 태가 더욱 직관적이다.
지능화9)
스마트 홈 앱은 임무를 정확하게 분석하고, 사 용자의 습관과 규칙을 정리하여 과거의 데이 터를 바탕으로 시스템을 스스로 학습할 수 있 게 하여 사용자에게 지능적이고 효율적인 서 비스를 제공할 수 있도록 한다.
<표 2> 스마트 홈 앱 사용성 평가 특성 요인
3. 연구 방법
3.1. 조사 대상과 연구의 방법 및 절차
본 연구에서는 스마트 홈 앱 디자인의 사용성 평가 요인을 도출과 중요도의 분석하기 위하여 본 연구에서는 델파이 기법과 AHP 계층분석법을 사용하였다.
델파이 조사 및 AHP 분석을 위해 33명을 전문가 대상으로 선정하였는데, 디자인학 전공 교수 5명, 디자인학 전공 석, 박사 20명, UI/UX 디자이너 8명(경력 5년 이상)을 조사 대상으로 초청하였다.
연구는 크게 평가요인 수집, 델파이 조사, AHP 분석의 순서로 진행하였다. 따라서 우선 스마트 홈 앱 디자인의 사용성 기초 평가 요인을 수집하기 위하여 기존 선행연구 및 문헌조사를 토대 로 수집하였다. 다음에는 전문가 집단을 구성하여 델파이 기법으로 평가 상위 요인을 선정하기 위한 1차 델파이 조사를 실시하였고, 선정된 상위 요인을 바탕으로 국내외 선행연구와 사용자 인터뷰 조사를 통해 하위 요인을 수집하였다. 그다음으로 수집된 하위 요인은 2, 3차 델파이 조사를 거쳐 적절한 하위 요인이 선정되었다. 선정된 평가 요인의 가중치를 설정하여 중요도를 구성하기 위하여 AHP 기법10)을 사용하였다.
본 조사에서는 2018년 9월부터 10월 까지 3차례 델파이 조사를 걸쳐 사용성에 미치는 평가요 인 추출 및 AHP 기법을 이용하여 평가요인의 중요도 우선순위를 결정하기 위하여 다음과 같이 진행하였다. 전문가들이 전자메일과 전화로 참여 협조를 요청한 후에 개인별로 전자메일 을 통해 설문지를 배부 및 회수하였다.
선행연구 및 문헌 조사 사용성 기초 평가 요인 수집
평가요인 선정
1차 델파이 조사 사용성 상위 요인 선정
선행연구 조사 및 사용자 인터뷰 사용성 하위 요인 수집
2차⁄3차 델파이 조사 사용성 하위 요인 선정
가중치
산출 AHP 계층분석 가중치 산출
스마트 홈 앱 디자인의 사용성 평가 요인의 중요도(우선순위) 도출
<그림 1> 스마트 홈 앱 디자인의 사용성 평가 요인 중요도 분석 연구 흐름도
3.2. 델파이 기법
델파이 분석은 전문가 집단의 의견과 판단을 추출하고 종합하기 위하여 동일한 전문가 집단에 게 설문조사를 단계별로 실시하여 집단의 의견을 종합하고 정리하는 조사연구기법으로 활용 되고 있다. 이 방법은 체계적으로 구성된 일련의 설문지를 동일한 사람에게 3∼4회 반복실시 하게 되는데, 각 회의 설문지를 전회의 설문 조사 결과에 대한 보고와 함께 제시함으로써, 설문 조사 응답자에게 다른 사람들의 정보와 의견이 환류(Feedback)될 수 있도록 고안된 방법 이다.11)
이러한 델파이 기법의 적용 절차는 전문가 집단의 선정, 질문지 조사, 설문의 안정성 평가, 전문가 집단별 특성에 따른 순위 비교의 절차를 가진다.12) 전문가 집단의 선정은 대상자는 연구주제에 관련된 그 분야의 전문가로 구성하며 이때 대상자의 대표성, 적절성, 전문적 지식 능력, 참여의 성실성, 대상자의 수 등을 신중하게 고려하여야 한다.
10) Saaty, T.L.『The Analytic Hierarchy Process』, McGraw-Hill, Inc.1980, pp.426-447.
11) 이화룡, 조창희, ‘학교건축의 디자인 품질지표 개발에 관한 연구’, 대한건축학회 논문집-계획계, 28(5), 2012, p.70.
12) 박도순, 『교육연구방법론』, 문음사, 2001, p.230.
3.3. AHP 계층분석법
AHP는 인간이 의사 결정 시 두뇌가 단계적 또는 위계적 분석과정을 활용한다는 사실에 착안 하여 개발되었다. AHP는 복잡한 의사결정 상황에서 수많은 의사결정 요소들의 가중치 또는 중요도를 간단한 쌍대비교(1:1비교)를 통하여 산출해 내는 데 있다. 이러한 쌍대비교의 주된 이점은 인간 마음이 여러 문제를 동시에 구별하는 것보다 2개의 상이한 문제별로 세분하여 판단하면 중요도의 차이를 더 쉽게 구별할 수 있다는 점에 있다.13)
AHP 의사결정에서는 전문가가 주관적으로 판단한 요소 간의 심각성의 공리를 만족시키면서 얼마나 일관성 있게 응답하였는가를 알기 위해서 일치성 비율(CR)을 분석이 필요하다. 이 일치성비율을 가지고 일치성 여부를 판단하게 된다. 따라서 본 조사는 일관성 비율은 0.1이하 로 설정하고 이를 넘지 않는 30부의 응답지를 AHP 분석 프로그램인 Expert Choice 11.5를 사용하여 최종 계산하였다.
상위 요인 하위 요인 연구자 상위 요인 하위 요인 연구자
유효성
조작유효 이자경,2005
만족성
가치 달성 Wang,peisong,2016
정보공유 정회준,2015 요소활용 최지혜,2014
인터랙션 안정 Jiang yue,2016 기능 만족감 Jiang yue,2016
효율성
시스템 효율 최지혜,2014 감정적 설계 Wang,peisong,2016
시간반응성 최지혜,2014 인터페이스 미학 김민주,2016
자원효율 Jiang yue,2016
오류 허용성
오류보호 이자경,2005
진행상태 정회준,2015 오류방지 이자경,2005
에너지 절약 Wang,peisong,2016 오류보조 Jiang yue,2016
기술의 완성도 최지혜,2014 회복 가능 최지혜,2014
수행 효율 김민주,2016
안전성
안전 모니터링 최지혜,2014
용이성
정보주목성 정회준,2015 원격 홈 보안 추구 Wang,peisong,2016
융통성 정회준,2015
지능화
지능 건강 관리 Wang,peisong,2016 가족 조작 용이 Hu,Qianqian,2018 인공지능 보조 Wang,peisong,2016
개인 조작 용이 Hu,Qianqian,2018 지능 인터랙션 Wang,peisong,2016
정보이해성 김민주,2016 지능 라이프 서비스 Wang,peisong,2016
인지용이성 김민주,2016
연통성 상호 호환성 최지혜,2014
조작용이 김민주,2016
<표 3> 33개 하위 요인
4. 결과 및 분석
4.1. 스마트 홈 앱의 사용성 평가 요인 선정 결과 4.1.1. 상위 요인 선정 결과
상장에서 선별된 18개의 평가 상위 요인에 대한 1차 델파이 조사를 통하여 적절한 상위 요인 이 선정되었다. 분석 결과를 살펴보면 스마트 홈 앱의 사용성 평가의 적절한 상위 요인에서는 유효성, 효율성, 용이성, 오류 허용성, 만족성, 안전성, 연통성, 지능화로 8개가 선정되었다.
13) 이화룡, 조창희, ‘학교건축의 디자인 품질지표 개발에 관한 연구’, 대한건축학회 논문집-계획계, 28(5), 2012, p.70.
4.1.2. 하위 요인 선정 결과
1차 델파이 조사 결과 도출된 상위 요인을 바탕으로 그 하위 포함된 평가 요인을 수집하기 위해 국내외 선행연구를 통해 총 33개 하위 요인을 수집하였다(<표 3> 참조). 조사한 선행연 구들은 이자경(2005), 최지혜(2014), Wang, peisong(2016), Jiang yue(2016)등에 비롯한다.
요인 항목 내용
유효성
조작유효 인터페이스에서 제공하는 관련 설계를 통해 지정된 작업을 정확하게 완료 할 수 있다.
정보 피드백 적합하고 정확한 피드백을 제공 한다.
인터랙션 안정 시스템 운행이 원활하고 안정성이 높다.
효율성
시스템 효율 즉시적인 반응으로 해당 정보를 제공 한다.
자원효율 트래픽 및 전력 소비량 절감/사용 메모리 공간 감소/시작 시간 단축/로그인 성공률 높다 등
수행 효율 인터페이스는 지정된 작업을 신속하게 완료할 수 있다.
용이성
정보주목성 중요한 정보가 시각적으로 주목성、가독성 있게 디자인 되었다.
융통성 초보 또는 고급 사용자가 모두 사용할 수 있을 정도로 기능, 인터페이스가 융통성이 있다.
정보이해성 정보와 어휘들을 이해하기 쉽다.
조작용이 디자인이 기능을 빠르고 쉽게 조작할 수 있도록 설계되었다.
만족성
가치 달성 제공된 서비스는 소비자가 가치를 만족시키는 만족감을 가져온다.
기능 만족감 디자인한 기능에 대한 만족감을 준다.
인터페이스 미학 미적으로 아름답게 디자인되어 있다.
오류 허용성
오류보호 도움말이나 사용설명서 예시가 제공 된다.
오류보조 오류 방지 문제 해결을 위한 지원 제공 된다.
회복 가능 실행 및 복구 기능을 제공한다.
안전성
안전 모니터링 경고 기능 제공 된다.
(예: 물, 전기, 가스 등 누출 감시 또는 불법 침입 통보 등) 시스템 보안 방문 시 신원 식별 제공 된다(지문, 영상 등).
프라이버시 보호 정보와 데이터의 보호, 유출, 변조, 유실, 파쇄 등을 제공한다.
예비 및 회복 데이터 및 시스템 복구가 가능한 백업 및 복구 서비스를 제공 된다.
연통성
상호 호환성 다른 브랜드와 다른 플랫폼 간의 호환할 수 있다.
(예: Windows, Android, IOS 다양한 시스템 간 상호 호환성 등) 상호 운용성 다른 제어 지점과의 정보 상호 작용 및 운용 동기화.
데이터 연통 개별 센서로부터 수집된 데이터를 수집, 처리 및 분석을 일체화된 채집을 분석하기도 한다.
지능화
지능 건강 관리 개인 또는 가족 구성원의 건강관리 기능(수면 품질, 혈압, 혈당, 의료 상담 등)을 제공하기도 한다.
인공지능 보조 사용자 데이터에 대한 깊이 있는 학습, 분석 능력을 구비하고 있으며, 사용 자에게 자주적 사고에 기반 한 능동적인 서비스를 제공한다.
지능 라이프 서비스 사용자의 선호에 따라 맞춤 생활 장면을 제작할 수 있다.(예: 내부 온도, 습도, 광도를 자동 조정하기 등)을 사용자 환경에 맞게 맞춤화.
지능 인터랙션 지능화된 인터랙션 방식 제공한다.
(예: 음성 인식, 의미 이해, 동작 인식, 심지어는 뇌파 인식 등).
<표 4> 최종 평가 요인
부족한 평가 하위 요인들을 보완하기 위하여 사용자를 대상으로 심층인터뷰를 실시하였다.
대상자는 스마트 홈 앱에 대해 어느 정도 알고 있거나 사용 경험 있는 남녀 총 6명을 대상으로 인터뷰를 진행하였고 총 11개 요인을 수집하였다. 정리한 요인들은 수행 효율, 정보 피드백, 안전 모니터링, 시스템 보안, 프라이버시 보호, 가족 조작 용이, 조작 도움, 지능 라이프 서비스, 상호 운용성, 인터페이스 미학, 데이터 연통이다. 위와 수집된 하위 요인 중에서 중복되고, 연관성 있는 요인을 정리해서 총 38개 선별 하고, 2, 3차 델파이 조사를 거쳐 적절한 하위 요인을 선정되었다. 2차 에서는 29개 하위 요인 선정하고, 3차 조사에서 최종 27개 (<표 4>
참조) 하위 요인이 선정되었다.
4.2. 평가 요인 중요도 분석 결과 4.2.1. 상위 요인 분석 결과
사용성 평가 미치는 상위 요인으로는 <표 5>와 같이 안전성 요인이 0.257로 가장 중요한 요인으로 나타났으며 그 뒤는 유효성 요인 0.240, 용이성 요인 0.174, 효율성 요인 0.120 상대 적 높게 나타났다. CR값은 0.023으로 0.1보다 작아 유효한 것으로 판단된다.
방사형 차트 요인 (상위) 가중치 우성순위 CR
유효성 0.240 2
0.023
효율성 0.120 4
만족성 0.030 8
오류 허용성 0.042 7
안전성 0.257 1
지능화 0.080 5
연통성 0.055 6
용이성 0.174 3
<표 5> 평가 요인(상위)의 우선순위
4.2.2. 하위 요인 분석 결과
하위 요인에 속하는 유효성 요인 , 효율성 요인, 만족성 요인, 용이성 요인, 오류 허용성 요인, 안전성 요인, 지능화 요인, 연통성 요인별 분석결과는 <표6, 7, 8, 9, 10, 11, 12, 13>와 같이 나타났으며, 각 평가 요인별 CR 값은 모두 0.1보다 작아 유효한 것으로 판단된다.
1) 유효성 요인의 우선순위
유효성 요인 중 조작유효 0.557 가장 중요한 것으로 나타났으며 그 뒤로 인터랙션 안정 0.320, 정보 피드백 0.123의 순으로 나타났다. 이 측정결과는 유효성 요인의 측정항목의 경우 조작유 효 참여비율이 상대적 중요함을 의미한다.
요인 (상위) 요인(하위) 가중치 우성순위 CR
유효성 (0.240)
조작유효 0.557 1
0.02
정보 피드백 0.123 3
인터랙션 안정 0.320 2
<표 6> 유효성에 대한 항목의 우선순위
2) 효율성 요인의 우선순위
효율성 요인 중 시스템 효율 0.525 가장 중요한 것으로 나타났으며 그 뒤로 수행 효율 0.334,
자원효율 0.141의 순으로 나타났다. 이 측정결과는 효율성 요인의 측정항목의 경우 시스템 효율 참여비율이 상대적 중요함을 의미한다.
요인 (상위) 요인(하위) 가중치 우성순위 CR
효율성 (0.120)
시스템 효율 0.525 1
0.05
자원효율 0.141 3
수행 효율 0.334 2
<표 7> 효율성에 대한 항목의 우선순위
3) 만족성 요인의 우선순위
만족성 요인 중 기능 만족감 0.557 가장 중요한 것으로 나타났으며 그 뒤로 인터페이스 미학 0.320, 가치 달성 0.122의 순으로 나타났다. 이 측정결과는 만족성 요인의 측정항목의 경우 기능 만족감 참여비율이 상대적 중요함을 의미한다.
4) 용이성 요인의 우선순위
용이성 요인 중 융통성 0.482 가장 중요한 것으로 나타났으며 그 뒤로 조작용이 0.272, 정보이 해성 0.157, 정보주목성 0.088의 순으로 나타났다. 이 측정결과는 용이성 요인의 측정항목의 경우 융통성 참여비율이 상대적 중요함을 의미한다.
요인 (상위) 요인 (하위) 가중치 우성순위 CR
용이성
（0.174）
정보주목성 0.088 4
0.05
융통성 0.482 1
정보이해성 0.157 3
조작용이 0.272 2
<표 9> 용이성에 대한 항목의 우선순위
5) 오류 허용성 요인의 우선순위
오류 허용성 요인 중 오류보호 0.539 가장 중요한 것으로 나타났으며 그 뒤로 오류보조 0.297, 회복 가능 0.163의 순으로 나타났다. 이 측정결과는 오류 허용성 요인의 측정항목의 경우 오류 보호 참여비율이 상대적 중요함을 의미한다.
요인 (상위) 요인(하위) 가중치 우성순위 CR
오류 허용성 (0.042)
오류보호 0.539 1
0.01
오류보조 0.297 2
회복 가능 0.163 3
<표 10> 오류 허용성에 대한 항목의 우선순위
요인 (상위) 요인(하위) 가중치 우성순위 CR
만족성 (0.030)
가치 달성 0.122 3
0.02
기능 만족감 0.557 1
인터페이스 미학 0.320 2
<표 8> 만족성에 대한 항목의 우선순위
6) 안전성 요인의 우선순위
안전성 요인 중 프라이버시 보호 0.466 가장 중요한 것으로 나타났으며 그 뒤로 시스템 보안 0.278, 안전 모니터링 0.161, 예비 및 회복 0.096의 순으로 나타났다. 이 측정결과는 안전성 요인의 측정항목의 경우 프라이버시 보호 참여비율이 상대적 중요함을 의미한다.
요인 (상위) 요인(하위) 가중치 우성순위 CR
안전성 (0.257)
안전 모니터링 0.161 3
0.01
시스템 보안 0.278 2
프라이버시 보호 0.466 1
예비 및 회복 0.096 4
<표 11> 안전성에 대한 항목의 우선순위
7) 지능화 요인의 우선순위
지능화 요인 중 지능 라이프 서비스 0.523 가장 중요한 것으로 나타났으며 그 뒤로 지능 건강 관리 0.229, 인공지능 보조 0.155, 지능 인터랙션 0.092의 순으로 나타났다. 이 측정결과는 지능화 요인의 측정항목의 경우 지능 라이프 서비스 참여비율이 상대적 중요함을 의미한다.
요인 (상위) 요인(하위) 가중치 우성순위 CR
지능화 (0.080)
지능 건강관리 0.229 2
0.06
인공지능 보조 0.155 3
지능 라이프 서비스 0.523 1
지능 인터랙션 0.092 4
<표 12> 지능화에 대한 항목의 우선순위
8) 연통성 요인의 우선순위
연통성 요인 중 상호 운용성 0.538 가장 중요한 것으로 나타났으며 그 뒤로 데이터 연통 0.297, 상호 호환성 0.163의 순으로 나타났다. 이 측정결과는 연통성 요인의 측정항목의 경우 상호 운용성 참여비율이 상대적 중요함을 의미한다.
요인 (상위) 요인(하위) 가중치 우성순위 CR
연통성 (0.055)
상호 호환성 0.163 3
0.01
상호 운용성 0.538 1
데이터 연통 0.297 2
<표 13> 연통성에 대한 항목의 우선순위
4.2.3. 복합가중치를 이용한 전체 하위 요인 분석
하위 요인 우선순위 분석결과를 토대로 복합가중치를 계산하였다. 복합가중치 계산 결과, 전체 27개의 하위 요인의 우선순위는<표 14>과 같이 나타났다. 사용성 평가 전체 측정요인들 간의 상대적 우선순위 및 복합 가중치의 분석에서 상대적 상위의 우선순위의 측정요인들은 조작 유효이 1위, 프라이버시 보호가 2위, 융통성이 3위, 인터랙션 안정이 4위, 시스템 보안이 5위 순으로 나타났다. 반면, 상대적 하위의 우선순위의 측정요인들은 가치 달성이 27위, 회복 가능 이 26위, 지능 인터랙션이 25위, 상호 호환성이 24위, 인터페이스 미학이 23위로 나타났다.
5. 결론 및 제언
본 연구는 스마트 홈 앱의 사용성 평가를 위한 도출된 평가 요인에 근거해서 AHP 기법을 사용하여 평가요인들의 우선순위 선정과 상대적 중요성의 분석을 실시하였다.
스마트 홈 앱 디자인의 사용성 평가요인 중 상위 측정 요인 유용성, 효율성, 만족도, 오류 허용 성, 안전성, 지능화, 연통성, 용이성에 대한 상대적 중요도의 우선순위 측정결과는 다음과 같 다. 즉, 측정요인 사이의 상대적 중요도와 우선순위는 안전성(0.257), 유용성 (0.240), 용이성 (0.174), 효율성(0.120), 지능화(0.080), 연통성(0.055), 오류 허용성(0.042), 만족도(0.030) 의 순으로 나타났다. 이 같은 분석결과는 스마트 홈 앱의 사용성 평가에 있어 안전성(0.257), 유용성 (0.240), 용이성(0.174)이 상대적 중요함을 의미한다. 하위인 유효성요인에서는 조작 유효, 효율성요인에서는 시스템 효율, 만족성 요인에서는 기능 만족감, 용이성 요인에서는 융 통성, 오류 허용성 요인에서는 오류보호 , 안전성 요인에서는 프라이버시 보호, 지능
요인 (상위) 요인 (하위) 복합가중치 우성순위
유효성
조작유효 0.1336 1
정보 피드백 0.0295 12
인터랙션 안정 0.0768 4
효율성
시스템 효율 0.063 6
자원효율 0.0169 17
수행 효율 0.0401 10
만족성
가치 달성 0.0037 27
기능 만족감 0.0167 18
인터페이스 미학 0.0096 23
오류 허용성
오류보호 0.022 15
오류보조 0.0124 22
회복 가능 0.0068 26
안전성
안전 모니터링 0.0413 9
시스템 보안 0.0714 5
프라이버시 보호 0.1197 2
예비 및 회복 0.0247 14
지능화
지능 건강 관리 0.0183 16
인공지능 보조 0.0125 21
지능 라이프 서비스 0.0418 8
지능 인터랙션 0.0074 25
연통성
상호 호환성 0.0089 24
상호 운용성 0.0296 11
데이터 연통 0.0163 19
용이성
정보주목성 0.0153 20
융통성 0.0838 3
정보이해성 0.0273 13
조작용이 0.0473 7
<표 14> 평가 지표에 대한 항목의 복합가중치
화 요인에서는 지능 라이프 서비스, 연통성 요인에서는 상호 운용성 등이 중요한 요인으로 도출되었다. 마지막으로 27개의 하위 각 요인에 대한 가중치를 상위 요인 가중치와 곱하여 상대적 중요도인 복합가중치를 분석한 결과 조작 유효, 프라이버시 보호, 융통성, 인터랙션 안정, 시스템 보안, 시스템 효율, 조작용이, 지능 라이프 서비스등과 같은 순위로 나타났다.
본 연구에서는 스마트 홈 앱의 사용성 평가요인 도출하고 평가요인을 계층화하여 가중치를 산출하였다. 가중치가 높은 평가요인들에 대해 우선적으로 개선 대책을 세우는 등의 효과적인 스마트 홈 앱의 디자인에 사용성 개선 작업에 본 논문의 결과를 이용할 수 있을 것으로 기대된 다. 또한 본 연구의 결과가 향후 스마트 홈 앱의 디자인의 사용성 평가를 하기 위한 우선순위 결정에 유용하게 사용되어지길 기대한다.
그러나 본 연구는 설문조사 시에 풍부한 전문가 집단의 의견수렴이 수행되지 못하였다는 한계 를 지니고 있다. 따라서 향후 사용성 평가지표 우선순위에 있어서 다양한 집단을 통해 각 집단 별 차이를 검증하는 구체적인 연구도는 지속적으로 이루어져야 필요하가 있다.
참고문헌
Shackel.B,『Human factors for informatics usability』, Cambridge University Press, 1991.
J. Nielson,『Usability Engineering』, Acadenic Press, 1993.
ISO 9241-11,『Ergonomic Requirements for Of Tice Work with Visual Display Terminals (VDT)s-Part II Guidanceon Usability』,1998.
Preece, J,& Benyon,D,『A guide to usability: Human factors in computing』, 1993.
Whitney Quesenbery,『Design and Research in a Connected World』, 2001.
P. Morville, 『Ambient Findability』, O’Reilly Media, Inc., 2005.
Jeff Johnson,『Designing with the Mind in Mind: Simple Guide to Understanding User Interface Design Rules』, 2011.
이승윤,「AHP 기법을 통한 선표 계획 평가방안」, 서울대학교, 2012.
김용수.「Smart hom을 기반으로 한 고령자 욕조 디자인 관한 연구」, 홍익대학교 대학원 석사학위논문, 2001.
이자경,「모바일 UI의 사용성 평가요인에 관한 연구」, 이화여자대학교, 2005.
김수철,「스마트 홈 환경에서 신뢰할 수 있는 사용자 인증 및 추천 시스템에 관한 연구」중앙대학교 대학원, 2012.
문창수,「스마트 홈 네트워크에서의 사용자 인증 방안에 관한 연구」, 순천행대학교 산업정보대학원, 2013.
서보미, 「1인가구의 범죄예방을 위한 홈시큐리티 모바일앱 디자인」, 이화여자대학교 디자인대학원, 2015.
문창호,「미국에서 노인을 위한 스마트홈(SmartHome) 개념의 요소와적용」, 2009.
서하양,「스마트 홈 사용자 경험 디자인」, 연세대학교 대학원, 2015.
김민주,「모바일 스마트홈 어플리케이션 GUI디자인 유형에 따른 사용편의성이 이용의도에 미치는영향에 관한 연구」, 홍익대학교 광고홍보대학원, 2016.
김민주,「모바일 스마트홈 어플리케이션 GUI디자인 유형에 따른 사용편의성이 이용의도에 미치는영향에 관한 연구」, 홍익대학교 광고홍보대학원, 2016.
최지혜, 「모바일 웹 UI/UX 의 사용성 향상을위한 감리 프레임워크 연구」, 건국대학교 정보통신대학원, 2014.
Jiang yue, 「Research on App Availability Evaluation of Social Mobile Phone Based on User Perspective」, Nankai University, 2016.
Wang, Peisong, 「Research on Interface Interaction Design of Smart Home Control Terminal Based on General Design Concept」, Xi'an University of Engineering, 2016.
Hu, Qianqian,「Research on Intelligent Product Design of Empty Nest Elderly Home Care」, Zhengzhou Institute of Light Industry, 2018.
Chen Xi 외2명, Application of IOT in Smart Grid，ELECTRICITY, 2012
정회준, 김광명, 조선, 고영준, ‘서비스디자인 플랫폼을 위한 사용성 평가지표 연구’, 한국과학예술포럼, 20, 409-419, 2015.