질문
시나리오 명(사용자에게 노출하지않음) |
과제(테스크) |
사전 조건 및 시작화면 |
정상 경로 |
과제 관련 질문 |
기록 |
비고 |
회원가입 |
주어진 정보를 사용하여 새 계정을 생성해주세요 |
- 테스트 계정 생성을 위한 정보가 필요합니다. |
|
|
|
|
- 메인 화면에서 시작합니다. | 메인 → 회원가입 약관 모달 → 회원가입 양식 → 가입 성공 모달 | (과제별 핵심 질문)
• 약관 및 회원가입 여부를 모달로 제공함에 따른 불편함은 없었나요?
(정상 경로를 벗어났을 때)
• 다른 페이지로 이동한 이유는 무엇인가요?
(멈춤 혹은 버벅임이 발생했을 때)
• 해당 컴포넌트 혹은 페이지에서 어려움을 겪은 이유는 무엇인가요?
(과제에 실패했을 때)
• 과제에 실패한 이유는 무엇인가요? (문구 이해의 어려움, 주요 컴포넌트의 가시성 부족, 적절한 위치에 존재하지 않는 등의 문제인지 질문) | - 사용자가 정상적인 경로를 벗어난 경우, 해당 경로를 기록해주세요.
- 사용자가 멈추거나 버벅이는 화면 또는 컴포넌트가 있다면 기록해주세요. | - 테스트를 원활하게 진행하기 위해 유경이의 계정 정보를 사용하여 테스트를 진행하면 됩니다. 각 테스트 후에는 회원 탈퇴를 진행하면 됩니다. |
| 로그인 | 새로 가입한 계정으로 로그인하여 졸업 사정 결과를 확인해주세요. 졸업하려면 앞으로 몇학점이 필요하나요?
| - 테스트 계정이 회원가입되어 있어야 합니다
- 로그인 화면 또는 메인 화면에서 시작합니다. | 메인 → 로그인 → 파일 업로드 → 마이페이지 → 결과페이지
(튜토리얼 확인 시)
메인 → 로그인 → 파일 업로드 → 튜토리얼 → 파일 업로드 → 마이페이지 → 결과 페이지 | (과제별 핵심 질문)
• 파일 업로드 안내 문구를 이해하는데 어려움이 없었나요?
• 파일 업로드 화면에서 "방법을 잘 모르겠다면"이라는 문구를 보셨나요?
• (튜토리얼 페이지로 이동한 경우) 튜토리얼 문구를 이해하는데 어려움이 없었나요?
• 해당 경로가 복잡하게 느껴졌나요? 생략해도 괜찮겠다고 생각한 부분이 있을까요?
• 졸업 사정 결과 정보를 확인하는데 어려움이 없었나요? 추가로 필요한 정보나 필요하지 않다고 생각하는 정보가 있나요?
(정상 경로를 벗어났을 때)
• 다른 페이지로 이동한 이유는 무엇인가요?
(멈춤 혹은 버벅임이 발생했을 때)
• 해당 컴포넌트 혹은 페이지에서 어려움을 겪은 이유는 무엇인가요?
(과제에 실패했을 때)
• 과제에 실패한 이유는 무엇인가요? (문구 이해의 어려움, 주요 컴포넌트의 가시성 부족, 적절한 위치에 존재하지 않는 등의 문제인지 질문)
• (튜토리얼을 확인하지 않고 실패한 경우) 튜토리얼을 확인하지 않은 이유는 무엇인가요? | - 사용자가 정상적인 경로를 벗어난 경우, 해당 경로를 기록해주세요.
- 사용자가 멈추거나 버벅이는 화면 또는 컴포넌트가 있다면 기록해주세요. | • 저희의 핵심 기능을 평가하는 테스트입니다. 사용자가 과제를 어떤 경로로 달성하는지, 그리고 중간에 어떤 부분에서 어려움을 겪는지를 기록해 주시기 바랍니다.
• 사용자가 혼자 문제를 해결할 수 있도록 최대한 간섭하지 않는 환경을 조성해 주세요.
• 성적표의 경우, 사용자가 직접 다운로드할 수 있는 것이 가장 좋습니다. 하지만 여건이 허락하지 않는다면, 제공하는 방향으로 진행해 주세요. |
| 과목 추가하기(과목명) | 이번 학기에 새롭게 수강한 "인공지능의 철학" 과목을 추가해주세요.
(인공지능 까지만 검색해주세요) | - 로그인 및 성적표가 업로드 되어야 합니다.
- 마이페이지에서 시작합니다. | 마이페이지 → 커스텀하기 → 검색 → 과목 추가 → 적용하기 | (과제별 핵심 질문)
• "적용하기" 버튼을 눌러야 커스텀한 과목이 저장됩니다. 이 점이 충분히 예상가능했습니까?
• 검색 결과에서 빨간색으로 표시된 과목이 무엇을 의미하는지 예상 가능하십니까?
(정상 경로를 벗어났을 때)
• 다른 페이지로 이동한 이유는 무엇인가요?
(멈춤 혹은 버벅임이 발생했을 때)
• 해당 컴포넌트 혹은 페이지에서 어려움을 겪은 이유는 무엇인가요?
(과제에 실패했을 때)
• 과제에 실패한 이유는 무엇인가요? (문구 이해의 어려움, 주요 컴포넌트의 가시성 부족, 적절한 위치에 존재하지 않는 등의 문제인지 질문)
| - 사용자가 정상적인 경로를 벗어난 경우, 해당 경로를 기록해주세요.
- 사용자가 멈추거나 버벅이는 화면 또는 컴포넌트가 있다면 기록해주세요.
- 사용자가 추가 버튼을 여러 번 클릭했는지 기록 | |
| 과목 삭제하기 | 기이수 과목에 채플 횟수가 잘못된 것 같아요! 채플 과목을 제거해주세요 | - 로그인 및 성적표가 업로드 되어야 합니다.
- 마이페이지에서 시작합니다. | 마이페이지 → 커스텀하기 → 채플 탐색 → 과목 삭제 → 적용하기 | (과제별 핵심 질문)
• 기이수 과목 목록에서 채플 과목을 찾는 데 어려움이 있었습니까?
(정상 경로를 벗어났을 때)
• 다른 페이지로 이동한 이유는 무엇인가요?
(멈춤 혹은 버벅임이 발생했을 때)
• 해당 컴포넌트 혹은 페이지에서 어려움을 겪은 이유는 무엇인가요?
(과제에 실패했을 때)
• 과제에 실패한 이유는 무엇인가요? (문구 이해의 어려움, 주요 컴포넌트의 가시성 부족, 적절한 위치에 존재하지 않는 등의 문제인지 질문) | - 사용자가 정상적인 경로를 벗어난 경우, 해당 경로를 기록해주세요.
- 사용자가 멈추거나 버벅이는 화면 또는 컴포넌트가 있다면 기록해주세요. | |
| 과목 추가하기(과목코드) | 역시 이번 학기에 새롭게 수강한 과목코드 "KMI02116" 과목을 추가해주세요 | - 로그인 및 성적표가 업로드 되어야 합니다.
- 마이페이지에서 시작합니다. | 마이페이지 → 커스텀하기 → 검색 창 → 과목코드로 검색 변경 → 과목 추가 → 적용하기 | (과제별 핵심 질문)
• 과목 코드로 검색을 변경하는데 어려움이 있었습니까?
(정상 경로를 벗어났을 때)
• 다른 페이지로 이동한 이유는 무엇인가요?
(멈춤 혹은 버벅임이 발생했을 때)
• 해당 컴포넌트 혹은 페이지에서 어려움을 겪은 이유는 무엇인가요?
(과제에 실패했을 때)
• 과제에 실패한 이유는 무엇인가요? (문구 이해의 어려움, 주요 컴포넌트의 가시성 부족, 적절한 위치에 존재하지 않는 등의 문제인지 질문) | - 사용자가 정상적인 경로를 벗어난 경우, 해당 경로를 기록해주세요.
- 사용자가 멈추거나 버벅이는 화면 또는 컴포넌트가 있다면 기록해주세요. | |
| 남은 과목 조회 | - 지금까지 들은 학문기초교양 과목과 앞으로 졸업을 위해 들어야 할 학문기초교양 과목은 무엇인지 알려주세요.
- 우측 상단의 분수가 의미하는 것이 무엇일지 알려주세요. | - 로그인 및 성적표가 업로드 되어야 합니다.
- 마이페이지에서 시작합니다. | 마이페이지 → 결과 페이지 → 공통교양 모달 → 과목 확인 | (과제별 핵심 질문)
• 지금까지 수강한 학기교 과목 확인에 어려움이 없었나요?
• 앞으로 수강해야 할 학기교 과목 확인에 어려움이 없었나요?
(정상 경로를 벗어났을 때)
• 다른 페이지로 이동한 이유는 무엇인가요?
(멈춤 혹은 버벅임이 발생했을 때)
• 해당 컴포넌트 혹은 페이지에서 어려움을 겪은 이유는 무엇인가요?
(과제에 실패했을 때)
• 과제에 실패한 이유는 무엇인가요? (문구 이해의 어려움, 주요 컴포넌트의 가시성 부족, 적절한 위치에 존재하지 않는 등의 문제인지 질문) | - 사용자가 정상적인 경로를 벗어난 경우, 해당 경로를 기록해주세요.
- 사용자가 멈추거나 버벅이는 화면 또는 컴포넌트가 있다면 기록해주세요. | - 성적표 상황에 따라 공통교양이 아닌 다른 카테고리로 변경해도 괜찮습니다. |
| 성적표 재업로드 | 학기가 마침내 끝나고 새 성적표가 발표되었습니다. 다음 학기를 위해 새 성적표를 입력해주세요! | - 로그인 및 성적표가 업로드 되어야 합니다.
- 메인 화면에서 시작합니다 | 메인 → 마이페이지 → 업로드 화면 → 파일 업로드 | (과제별 핵심 질문)
• 과제를 보고 나서 파일 업로드 위치가 바로 떠올랐습니까?
• 그렇지 않다면, 파일 업로드는 어디에 위치하는 것이 가장 좋을 것 같습니까?
(정상 경로를 벗어났을 때)
• 다른 페이지로 이동한 이유는 무엇인가요?
(멈춤 혹은 버벅임이 발생했을 때)
• 해당 컴포넌트 혹은 페이지에서 어려움을 겪은 이유는 무엇인가요?
(과제에 실패했을 때)
• 과제에 실패한 이유는 무엇인가요? (문구 이해의 어려움, 주요 컴포넌트의 가시성 부족, 적절한 위치에 존재하지 않는 등의 문제인지 질문) | - 사용자가 정상적인 경로를 벗어난 경우, 해당 경로를 기록해주세요.
- 사용자가 멈추거나 버벅이는 화면 또는 컴포넌트가 있다면 기록해주세요. | |
참고자료
https://design-tra.tistory.com/entry/UX리서치UXR-❸-정성-사용성-평가UTUsability-Testing-정성스럽게-태스크-시나리오-준비하기
https://techblog.gccompany.co.kr/ux-디자이너가-리서처-없이-사용성-테스트-하는-방법-2e630ddc4acd
결과
결과
- 실험 참여자 1명과 참여자 4명에 대해서 테스트를 진행했음
- 개인 결과에 대한 내역은 실험 참여자 1명을 포함해 5명을 대상으로 기록하였지만, 전체 영상을 확보하고 있는 4명의 참여자에 대한 결론을 정리하고자 함
개인 결과
시나리오 명(사용자에게 노출하지않음) |
과제(테스크) |
과제 관련 질문 |
변경을 진행할 부분 |
회원가입 |
주어진 정보를 사용하여 새 계정을 생성해주세요 |
(과제별 핵심 질문) |
|
• 약관 및 회원가입 여부를 모달로 제공함에 따른 불편함은 없었나요? |
|
|
|
전체 테스터가 없다고 답변 |
|
|
|
(멈춤 혹은 버벅임이 발생했을 때)
1명: level표시가 잘 안보였음
| - 추가적으로 아이디를 한글로 적는 사용자 존재, placeholder를 명확하게 개선 필요 ( 영상에는 안나옴) |
| 로그인 | 새로 가입한 계정으로 로그인하여 졸업 사정 결과를 확인해주세요. 졸업하려면 앞으로 몇학점이 필요하나요?
| (과제별 핵심 질문)
• 파일 업로드 안내 문구를 이해하는데 어려움이 없었나요?
전체 테스터가 없다고 답변
• 파일 업로드 화면에서 "방법을 잘 모르겠다면"이라는 문구를 보셨나요?
• (튜토리얼 페이지로 이동한 경우) 튜토리얼 문구를 이해하는데 어려움이 없었나요?
튜토리얼로 이동한 사용자가 존재하지않음
• 해당 경로가 복잡하게 느껴졌나요? 생략해도 괜찮겠다고 생각한 부분이 있을까요?
- 1명 :
없음
- 1명 :
귀찮긴했음, 통합로그인을 하면 좋았을텐데 아쉽다
- 1명 :
결과페이지 들어가는게 불필요해보였음 해당 depth없이 바로 노출했으면 좋겠음
- 1명 :
어쩔 수 없다고 느끼지만 pdf이동하는 과정이 불편하다고 느낌
• 졸업 사정 결과 정보를 확인하는데 어려움이 없었나요? 추가로 필요한 정보나 필요하지 않다고 생각하는 정보가 있나요?
- 1명 :
몇학점 남았는지에 대한 정보(과제로 주어진 정보)가 결과페이지에 존재할 것으로 예상했는지 존재하지 않아서 어려웠음
| - 로그인 후 라우팅 할 페이지에 대해 논의 필요 |
| 과목 추가하기(과목명) | 이번 학기에 새롭게 수강한 "인공지능의 철학" 과목을 추가해주세요.
(인공지능 까지만 검색해주세요) | (과제별 핵심 질문)
• "적용하기" 버튼을 눌러야 커스텀한 과목이 저장됩니다. 이 점이 충분히 예상가능했습니까?
- 2명 :
예상이 어려움
- 1명 :
몰랐다고 하는데, 실제로는 진행함
- 1명 : 예상함
• 검색 결과에서 빨간색으로 표시된 과목이 무엇을 의미하는지 예상 가능하십니까?
- 2명 :
기이수 과목 등 듣지 않아도 되는 과목에 대한 표시
- 1명 :
추가할 수 없는 과목으로 예상
- 1명 :
모르겠음, 들으면 안되는 과목
(멈춤 혹은 버벅임이 발생했을 때)
• 해당 컴포넌트 혹은 페이지에서 어려움을 겪은 이유는 무엇인가요?
- 1명 :
커스텀하기가 추가인지 몰라서 어려움을 겪음
- 1명 :
커스텀 및 업로드버튼 중에서 어떤것을 선택할지 헷갈림
| - 검색 결과에서 빨간색으로 표시된 항목(폐강 여부)에 대해서는 개선의 여지가 명확함
- 커스텀 기능에 대해 사용자들이 인지를 잘 못함. |
| 과목 삭제하기 | 기이수 과목에 채플 횟수가 잘못된 것 같아요! 채플 과목을 제거해주세요 | (과제별 핵심 질문)
• 기이수 과목 목록에서 채플 과목을 찾는 데 어려움이 있었습니까?
- 2명 :
쉬움
- 1명 :
어렵지는 않지만, 과목이 많으면 검색이 어려울것같음
- 1명 :
커스텀하기에 삭제 안내없이, 추가 안내만 제공되어 헷갈림
| - 커스텀 기능을 인지한 후에는 과목 삭제에 어려워하지 않음. |
| 과목 추가하기(과목코드) | 역시 이번 학기에 새롭게 수강한 과목코드 "KMI02116" 과목을 추가해주세요 | (과제별 핵심 질문)
• 과목 코드로 검색을 변경하는데 어려움이 있었습니까?
- 2명 :
쉬움
- 1명 :
어렵지는 않지만, 현재 적용된 기준이 무엇인지 헷갈림
- 1명 :
과목코드로 변경하는 option이 존재하는지 예상 못함
| - 추가 버튼이 클릭 시 UI 변경에 대한 개선 필요 ( 진행 중 ) |
| 남은 과목 조회 | - 지금까지 들은 학문기초교양 과목과 앞으로 졸업을 위해 들어야 할 학문기초교양 과목은 무엇인지 알려주세요.
- 우측 상단의 분수가 의미하는 것이 무엇일지 알려주세요. | (과제별 핵심 질문)
• 지금까지 수강한 학기교 과목 확인에 어려움이 없었나요?
- 2명 :
없었음
- 1명 :
처음 기수강 정보에 대한 내역이 나올 것으로 예상하여 헷갈림. 이수 내역을 보고 미이수 과목임을 예측함
- 1명 :
기이수 미이수 선택하는 토글이 눈에 잘 보이지않았음(사용자의 테마가 일반적이지 않아 색상 적용이 안되었음-심유진테스터)
| |
| 성적표 재업로드 | 학기가 마침내 끝나고 새 성적표가 발표되었습니다. 다음 학기를 위해 새 성적표를 입력해주세요! | (과제별 핵심 질문)
• 과제를 보고 나서 파일 업로드 위치가 바로 떠올랐습니까?
- 2명:
업로드가 있는걸 알고있었고 예측할 수 있었다
- 1명:
떠오르지 않았지만, 찾는 것이 쉬웠음
- 1명:
떠오르지는 않았음
| |