A Hybrid Usability Approach for Rating Evaluation of M-Commerce Applications

현대적인 쇼핑의 번창하는 세계에서, 성공적인 앱과 잊혀진 앱의 차이는 종종 단 하나의 찰나의 순간, 즉 사용하기가 얼마나 쉬운가에 달려 있습니다. 사용성(usability)이라고 알려진 이 연구 분야는 사람과 그들이 손에 쥐고 있는 기술 사이의 마찰을 조사합니다. 이는 단순하지만 심오한 질문을 던집니다. 사용자가 인터페이스를 빠르게 익힐 수 있는가? 시스템이 일관되게 작동하는가? 과업을 완수하는 것이 만족스러운가? 모바일 기기를 통해 상품을 판매하는 기업들에게 이러한 질문은 단순히 편안함에 관한 문제가 아닙니다. 그것은 생존에 관한 문제입니다. 애플리케이션을 탐색하기 어려우면 사용자는 떠나고, 디지털 상점은 가치를 잃습니다. 어떤 구체적인 디자인 요소가 높은 평점을 이끌어내는지 이해하는 것은, 사람들이 실제로 계속 사용하고 싶어 하는 도구를 만들고자 하는 개발자들에게 매우 중요합니다.

파키스탄의 한 연구팀은 해당 지역에서 사용되는 다섯 가지 인기 모바일 쇼핑 애플리케이션인 Daraz, Shophive, Home Shopping, Symbios, 그리고 Yayvo를 살펴봄으로써 이 관계를 해독하고자 했습니다. 그들은 소프트웨어를 사용하기 쉽게 만드는 요소가 무엇인지에 대한 폭넓은 아이디어를 수집하며 시작했는데, 이는 사용성을 8가지 별개의 범주로 나누는 확립된 이론들로부터 도출되었습니다. 이 범주들에는 사용자가 앱을 얼마나 빨리 배울 수 있는지, 디자인이 얼마나 일관되게 느껴지는지, 시스템이 인간의 실수를 얼마나 잘 처리하는지, 그리고 전반적인 경험이 얼마나 효율적인지가 포함되었습니다. 이 목록을 정교화하기 위해, 연구진은 이 분야의 전문가 8명으로 구성된 패널과 상담했습니다. 신중한 토론과 수정 과정을 거쳐, 그들은 긴 잠재적 질문 목록을 60개의 집중된 항목으로 좁혔으며, 이를 통해 모든 질문이 사용자의 경험에 대해 의미 있는 것을 측정하도록 보장했습니다.

정제된 질문들을 손에 쥔 연구진은 가장 중요한 대상인 쇼핑객들에게 눈을 돌렸습니다. 그들은 이러한 모바일 애플리케이션을 사용하여 제품을 정기적으로 구매하는 200명의 개인을 모집했습니다. 각 참가자는 앱에서 특정 과업을 수행하도록 요청받았으며, 그 후 설문 질문에 답하며 자신의 경험을 강력한 불일치부터 강력한 일치까지의 척도로 평가했습니다. 불완전하거나 일관되지 않은 응답을 제거한 후, 팀에는 168개의 실제 사용 사례에 대한 상세한 기록이 남았습니다. 이 데이터는 그들의 조사에 대한 토대가 되었으며, 어떤 요인들이 사용자들이 애플리케이션에 부여한 평점과 실제로 상관관계가 있는지 확인하게 해주었습니다.

연구진은 먼저 8가지 사용성 요인을 각각 개별적으로 살펴보며 각 요인이 최종 평점에 얼마나 영향을 미치는지 확인했습니다. 그들은 효율성, 즉 사용자가 얼마나 빠르고 매끄럽게 과업을 완료할 수 있는지가 높은 평점을 예측하는 가장 강력한 개별 예측 변수라는 것을 발견했습니다. 반대로, 사용자과 기계 사이의 물리적, 심리적 적합성을 포괄하는 광범위한 범주인 일반적인 인간 요인(general human factors)은 단독으로 고려되었을 때 평점에 가장 적은 영향을 미치는 것으로 나타났습니다. 이 초기 단계는 모든 사용성의 측면이 동일한 가치를 지니는 것은 아니며, 소비자들의 관점에서는 어떤 것들이 훨씬 더 중요하다는 것을 드러냈습니다.

더 명확한 그림을 얻기 위해, 연구팀은 변수를 하나씩 추가하여 최적의 적합성을 찾을 때까지 공식을 구축하는 통계적 방법을 사용하여, 이 요인들을 하나의 예측 모델로 결합했습니다. 그들은 원래의 8가지 요인 중 7가지를 사용하는 모델이 사용자 평점의 변동성을 91% 설명할 수 있다는 것을 발견했습니다. 제외해야 했던 한 가지 요인은 "인간 요인"이었는데, 이는 해당 요인이 중요하기는 하지만 다른 7가지 요인이 이미 고려되었을 때 예측에 독특한 가치를 충분히 더하지 못함을 시사합니다. 결과적인 모델은 학습 용이성, 효율성, 그리고 효과성이 핵심적인 역할을 하며, 앱이 높은 평점을 받을지 여부를 결정하는 데 가장 큰 비중을 차지한다는 것을 보여주었습니다.

그 후 연구팀은 모든 8가지 요인을 동일하게 중요하게 취급하여 본질적으로 평균을 내어 평점을 추측하는 더 단순한 접근 방식과 이 새로운 간소화된 모델을 비교했습니다. 각 요인의 중요성을 신중하게 가중치를 둔 새로운 모델이 압도적으로 우수하다는 것이 증명되었습니다. 단순 평균은 평점의 차이를 아주 적은 부분만 설명했지만, 새로운 모델은 이야기의 대부분을 포착해 냈습니다. 결과가 우연이 아님을 확실히 하기 위해, 연구진은 데이터를 서로 다른 그룹으로 나누는 과정을 통해 모델을 반복적으로 테스트하였으며, 이 과정은 그들의 결과가 서로 다른 사용자 집단에서도 안정적이고 신뢰할 수 있음을 확인시켜 주었습니다.

본 연구는 모바일 커머스 애플리케이션의 성공이 사용성의 가능한 모든 항목을 체크하는 것에 있지 않다고 결론짓습니다. 대신, 그것은 특정한 핵심 속성들을 숙달하는 것에 관한 것입니다. 사용자가 시스템을 얼마나 빨리 배울 수 있는지, 얼마나 효율적으로 쇼핑을 완료할 수 있는지, 그리고 앱이 목표를 달하는 데 얼마나 효과적으로 도움을 주는지에 집중함으로써, 개발자들은 애플리케이션이 받는 평점을 크게 향상시킬 수 있습니다. 이 연구는 핵심적인 7가지 요인에 초점을 맞추는 타겟팅된 접근 방식이, 디자인의 모든 측면을 똑같이 최적화하려고 노력하는 것보다 성공적인 모바일 쇼핑 경험을 만드는 데 훨씬 더 명확한 경로를 제공한다고 제언합니다.