좋은 서비스를 완성하는 UX 디자인 #10
UX의 완성도를 높이는 2가지 평가 방법
실험 연구(Lab Experiment)와 필드 테스트(Field Test)는 9편에서 설명한 UT 못지않게 널리 활용되는 프로덕트 평가 방법이에요. 하지만 세 가지 평가 방법의 목적과 세부적인 수행 방식은 조금씩 달라요.
사용자가 프로덕트를 기획 의도대로 원활하게 사용할 수 있는지를 평가하고자 하는 UT와 달리, 실험 연구는 기획 의도에 따라 설정한 여러 가지 디자인 전략 가운데 최선의 전략을 선택하고자 하는 방법이에요. 반면 필드 테스트는 실험실이나 오피스에서 진행하는 UT와 실험 연구와 달리 실사용 환경에서 유저가 경험할 수 있는 여러 가지 변수를 점검하는 평가법이죠.
어떤 디자인이 최선의 경험을 제공할 수 있을까?: 실험 연구
실험 연구 기획의 첫걸음은 평가 목표에 따른 변수들의 인과 관계를 정리해서 실험의 전반적인 구조를 짜는 거예요. 예를 들어, ‘좋은 UX 디자인을 통해 유저의 만족도를 높인다’는 평가 목표를 세웠다면 디스플레이 사이즈나 디바이스 타입처럼 사용 경험에 영향을 미치는 물리적인 환경은 독립 변수(Independent Variable), 그 결과로 만들어지는 유저 경험과 만족도는 종속 변수(Dependent Variable)에 해당하는데요. 결국 실험 연구는 종속 변수(유저 경험)를 목표한 방향(만족도를 높이는)으로 이끄는 독립 변수(디자인 요소)를 설정하기 위한 과정이라고 볼 수 있어요.
가장 친숙한 실험 연구 방법으로는 ‘A/B 테스트’가 있죠. A/B 테스트는 기존 A 버전의 사용 경험 개선을 위해 디자인을 일부 수정한 B 버전을 만들고, A와 B 각각의 사용 경험을 비교-확인하는 방법이에요. 다만 버튼 모양이나 검색 기능처럼 한 가지 독립 변수 변경에 대해 실험하는 A/B 테스트와 달리 실험 연구는 두 가지 이상의 독립 변수 변화에 따른 다양한 유저 경험을 복합적으로 비교 검토하는 경우가 많아요.
그 과정에서 원하는 결과를 깔끔하게 얻어내기 위해서는 독립 변수와 종속 변수 이외에 실험 결과에 영향을 미칠 만한 불필요한 변수를 통제해야 하는데요. 이런 변수들을 통제 변인(Control Variable)이라고 해요. 예를 들어, 자동차 운전 인터페이스에 대한 실험 연구 참가자를 모집할 때는 운전면허가 있는 사람들만 모집해야겠죠. 왜냐하면 운전면허가 없는 참가자에 대한 실험 결과는 운전 인터페이스를 개발하려는 목표에 부합하지 않는 불필요한 변수로 작용하기 때문이에요.
변수가 많은 일상 환경에서도 제대로 작동할까?: 필드 테스트
필드 테스트는 변수가 많은 일상 환경에서도 프로덕트가 제대로 작동하는지 검증하는 평가 방법이에요. 보통 출시가 임박한 시점에 활용하는 최종 점검법으로, 기획 의도나 가설에 대한 검증보다는 예상치 못한 변수를 확인하고 그런 변수를 해결하는데 초점을 맞추죠. 그래서 필드 테스트를 시행할 때는 갑작스러운 에러가 발생하거나, 유저 사용이 크게 늘거나 줄어드는 등 의외의 상황에 더욱 주목할 필요가 있어요.
다만 필드 테스트는 다른 평가 방법 대비 데이터 수집이 어려운 편이에요. 왜냐하면 실험실이나 오피스에서 데이터를 직접 수집하는 UT나 실험 연구와 달리 필드 테스트는 참가자가 실사용 환경을 경험할 수 있도록 앱이나 제품을 배포하고 피드백 또는 답변을 제출받는 방식으로 진행되기 때문이죠. 그래서 필드 테스트를 진행할 때는 다이어리와 같은 일일 기록 양식을 제공하거나 설문 링크를 모바일로 제공하는 등 참가자의 적극적인 답변 작성을 유도할 수 있는 데이터 수집 방법을 고민해 볼 필요가 있어요.
시간과 자원이 무한하다면 UT와 실험 연구, 필드 테스트를 모두 거치는 게 좋겠지만, 현실적인 UX 디자인 여건은 그렇지가 않죠. 따라서 개발 중인 프로덕트의 성격과 목적에 부합하는 평가 방법이 무엇일지 고민해 보고 가장 적합한 방법을 택하여 여러분의 프로덕트를 검토해 보세요.
본 내용은 지난 1~2월, 연세대학교 HCI LAB과 함께한 디캠프 성장 프로그램 ‘d·camp ux salon season4’의 일부 내용을 재구성하여 만들었습니다. 소중한 지식과 경험을 나눠주신 유영재 교수님께 감사드립니다!