사용성 테스트 (usability testing)
쉽게 풀면
사람들에게 제품을 실제로 써보게 하고, 얼마나 쉽고 빠르게 원하는 일을 할 수 있는지 관찰해서 문제점을 찾는 방법이에요.
왜 중요한가
사용성테스트는 실제 사용자에게 구체적 과업을 수행하게 하고 그 과정을서 관찰해 인터페이스의 문제점을 발견하는 조사 방법으로, 제이콥 닐슨은 5명의 참가자만으로도 주요 사용성 문제의 대부분을 발견할 수 있다는 연구 결과를 제시해 소규모 반복 테스트의 효율성을 뒷받침했다. 제품 출시 전후 여러 단계에서 반복적으로 실시하는 것이 실무의 표준적 흐름이다. 실제 완성 제품이 아니라 프로토타입 단계에서도 실시할 수 있어, 개발 완료 이후가 아니라 개발 과정 전반에 걸쳐 반복적으로 적용된다.
논문에서는 이렇게 쓰입니다
실제 사용자 대상 테스트를 통해 특정 기능의 접근성 문제를 정량적으로 발견한 결과를 보고하는 문장이다.
논문에서는 사용성 평가 결과가 인터페이스 개선안의 우선순위를 정하는 근거로 활용된다.
조금 더 깊게 보면
참가자 수가 적다는 점 때문에 정량적 통계 검증을 목적으로 하는 대규모 조사와 혼동해서는 안 되며, 사용성테스트는 통계적 대표성보다 질적으로 풍부한 문제 발견에 목적이 있다. 원격사용성테스트가 매체를 통한 변형이라면 이는 그 방법론의 기본 틀 자체를 가리킨다는 점에서 상하위 개념 관계에 있다. Jakob Nielsen은 통계적으로 유의미한 대규모 표본보다 5명 내외의 반복 테스트가 주요 사용성 문제의 대부분을 발견한다는 연구를 제시해 소수 표본 반복 테스트를 표준 관행으로 정착시켰다. 참여자에게 특정 과업을 완수하도록 요청하고 그 과정의 행동과 발화를 관찰하는 것이 핵심 방법이며, 완료율과 소요시간 같은 정량 지표와 발화 내용 같은 정성 자료를 함께 수집한다.
주의할 점
소수의 참가자로 얻은 사용성평가 결과를 전체 사용자 집단에 일반화할 때는 표본 크기와 대표성의 한계를 함께 고려해야 한다.
참여자에게 과업 수행 방법을 미리 알려주면 자연스러운 행동을 관찰할 수 없어 사전 힌트 제공을 최소화해야 한다. 참여자 수가 적을수록 특정 집단의 편향을 반영할 위험이 있어 대상자 선정 기준을 신중히 정해야 한다.