[기획] 9.사용성 테스트 3/3

다음의 테스트는 현재 웹 사이트 화면과 문제점을 개선한 수정된 화면, 두 가지를 모두 테스트해보고자 테스트 계획서를 작성한 사례다. 실제 테스트 계획서 작성 시 많은 도움이 될 수 있도록 필수 질문사항
과 테스트 후 질문 항목도 소개하였다.
• 아래 사용성 테스트 계획서는 수업시간 학생들의 과제물을 바탕으로 정리한 내용이다.
[사례1] : 사용성 테스트 계획서 ②
바로타의 사용성 테스트(http://www.barota.com)

1. 사용성 테스트 목적
바로타 웹 사이트에서 네비게이션의 유용성을 알아보고, 사용자들이 열차표 예약서비스를 편리하게 이용할 수 있는지 알아보고자 한다.

2. 사이트의 목적 분석
① 사이트 목표(Site Goal)
• 열차 이용고객을 더 많이 확보하기 위하여 인터넷 예약 서비스를 제공한다(특히 인터넷 사용세대의 열
차예약의 접근성을 높인다).
• 확보된 인터넷 열차 예약 서비스 고객을 이용해 쇼핑과 여행 등의 콘텐츠를 제공하여 수익성을 높인다.

② 유저 목표(User Goal)
역에 가지 않고도 인터넷 사용을 통하여 열차표 예약, 변경, 철회 등을 쉽고 편리하게 한다.

 

3. 태스크 목적
① 현재 웹 사이트 화면
사용자가 열차표 예약 서비스를 오류없이 성공적으로 이용할 수 있게 한다.
② 문제점을 개선한 수정된 화면
사이트의 메인 메뉴를 보고 하위 메뉴를 예상하게 한다(메뉴 그룹핑과 레이블링).

 

4. 테스트 방법
① 설문지 작성
사전 설문, 체험 후 설문으로 나누어 작성한다.

② 사용자 관찰 기법
관찰 항목에는 태스크 수행 소요시간, 태스크 수행 시 클릭 수, 태스크 수행 시 에러 수 등이 있다.
. 씽크 어라우드(Think Aloud): 테스트 참가자가 테스트를 진행하면서 느끼는 점을 큰소리로 말하도 록 요청한다.
• 인터뷰(Interview) 테스트 진행 중 예상하지 못했던 참여자의 행동, 궁금했던 사항 등에 대하여 인터 뷰한다.

5. 테스트 프로세스
① 오리엔테이션
• 테스트 참가자에게 테스트 참여에 대한 감사를 미리 전한다.
• 테스트 참가자에게 테스트에 대한 간략한 설명과 주의사항을 전달한다.
• 테스트 참가자에게 테스트 후 설문지를 작성하게 한다.
② 테스트
• 테스트 참가자가 실험지에 제시된 테스크 순서에 따라 수행하게 한다(과제 부과형 테스트).
• 씽크 어라우드를 사용자에게 요청한다.
③ 테스트 후 설문지
• 테스트 참가자가 테스트를 마친 후 체험 후 설문조사를 수행하게 한다.
④ 참가자 인터뷰
• 테스트 중 궁금했던 사항이나 기타 발견된 문제점에 대한 인터뷰를 실시한다.

6. 테스트 참가자 

① 테스트 참가자 선정 기준
바로타 웹 사이트 이용 예상자(아래 두 가지 조건 모두 충족)
• 인터넷 사용자: 인터넷을 이용하면서 바로타 웹 사이트에 접근 가능한 사람
• 열차 이용자: 열차를 이용하여 이동을 자주하는 사람
② 테스트 참가자 이름
•고 XX (22세 여)
•홍 XX (22세 여)
• 정 XX (22세 여)
•오 XX (22세 여)
• 최 XX (23세 남)
•이 XX (22세 여)

 

7. 테스트 스케줄
• 테스트 실행 일: 11월 2일(화요일)
• 테스트 실행 시간: 7시(참가자 한 명당 20분으로 예상)
• 테스트 실행 장소: 학교 B동 314호 강의실 (다음 그림과 같이 컴퓨터, 카메라, 녹음기, 참가자를 배치시킨다.)

 

• 테스트 스케줄
- 6시 00분 ~ 7시 00분: 고 XX (22세 여)
- 7시 20분 ~ 8시 20분: 홍 XX (22세 여)
- 8시 40분 ~ 10시 00분: 정 XX (22세 여)
- 10시 20분~11시 20분: 오 XX (22세 여)
- 11시 40분~ 13시 00분: 최 XX (23세 남)
- 13시 20분~ 14시 40분: 이 XX (22세 여)

 

8. 태스크 문항
(바로타 웹 사이트에서 다음 태스크 문항을 실행하면서 생각나거나 느낀 점을 자유롭게 애기해주세요)
현재 웹 사이트 화면에서의 수행사항)

1) 바로타 웹 사이트에서 열차표를 예매하려고 합니다.
① 회원가입(일반회원 가입)을 한 후 로그인하세요.

② 다음 조건의 기차표를 예매하세요.
• 출발: 서울
• 도착: 조치원
• 날짜: 2004년 11월 17일, 조치원에 10시 이전에 도착
• 무궁화호 식당간이 있는 열차
• 일반예약
• 좌석: 일반실, 순방향, 네 명
③ 앞에서 예약한 예약 상황에서 좌석을 두 명으로 변경하세요.
④ 예약한 내용을 모두 철회해주세요.

2) 바로타 웹 사이트에 글을 남기려고 합니다.
① 철도 이용 중 불편한 사항을 건의하는 글을 남겨주세요.
• 좌석의 청소상태가 불량하여 불편하였다는 내용으로
▶ 참가자들이 글의 내용을 생각하는 데 너무 많은 시간이 할애되지 않도록 대략의 내용을 제시해 주는 것이 좋다.

(문제점을 개선한 수정된 화면에서의 수행사항]
① 열차에서 잃어버린 분실물을 찾기 위한 페이지로 이동해주세요.
② 다음 과제를 수행하세요.
"나는 서울에서 출발하는 열차를 타기 위해, 친구는 수원에서 출발하는 열차를 타기 위해 열차표를 예매 하고자 합니다. 이때 같은 날 같은 열차의 옆 좌석에 앉고자 합니다. 나와 친구의 열차표 두 장을 예매할 수 있다고 생각되는 메뉴로 이동하여 나와 친구의 열차표를 예매해보세요."
③ 철도시간표를 다운로드하는 메뉴로 이동해보세요.

 

9. 테스트 전 설문지
이 테스트는 바로타 홈페이지의 문제점을 진단하기 위한 사용성 테스트입니다. 참가자께서는 테스트 전 설문지 를 작성하신 후 테스트를 수행하시고, 테스트 후 설문지를 작성하시게 됩니다.

사용성 테스트 계획서를 작성하였으면 테스트 계획서에 따라 테스트를 진행하면 된다. 실제 테스트를 시작하기 전에 파일럿 테스트를 실시하여 테스트 참가자들의 행동을 예측하고 발생할 수 있는 문제점 을 미리 예방할 수 있다.
다음은 사용성 테스트 결과의 중요한 내용을 사례로 소개하였다. 포맷과 내용에 있어서는 각 테스트의 특성에 맞게 조절할 수 있지만 테스트 결과 문제점을 진단하고 개선안을 제시한다는 취지만큼은 변하 지 않는 중요 요소다.