제10강 사고 발화법에 의한 평가
둘씩 짝을 지어 서로의 작품을 체험하고, 사고 발화법(Think-Aloud Protocol)을 사용해 개선점을 발견합니다.
이번 강의의 목표
- 사고 발화법의 방법을 이해하고 실천한다
- 다른 수강생에게 작품을 체험하게 해서 사용자의 관점에서 피드백을 얻는다
- 발견한 과제를 바탕으로 개선 계획을 세운다
준비물
| 항목 | 설명 |
|---|---|
| 자신의 작품 | 소리가 나고 센서로 조작할 수 있는 상태로 준비해 둔다 |
| 노트・필기구 | 관찰 기록용 |
| 작품 설명 시트 | 지난 강의에서 만든 것 |
사고 발화법이란
개요
사고 발화법(Think-Aloud Protocol) 은 사용성 평가의 대표적인 방법 중 하나입니다. 체험자가 작품을 사용하는 동안 머릿속에서 생각하고 있는 것을 그대로 소리 내어 말하게 함으로써, 직관적인 반응이나 당황하는 지점을 발견합니다.
왜 사고 발화법을 사용하는가
| 일반적인 피드백 | 사고 발화법 |
|---|---|
| 체험 후에 감상을 묻는다 | 체험 중에 실시간으로 생각을 듣는다 |
| 기억에 의존하기 때문에 정확하지 않을 때가 있다 | 그 순간의 솔직한 반응을 얻을 수 있다 |
| 「좋았어요」처럼 모호해지기 쉽다 | 「이건 뭐지?」와 같은 구체적인 반응을 알 수 있다 |
| 문제점을 잊어버릴 때가 있다 | 조작에서 헤맨 순간을 알 수 있다 |
사고 발화법의 장점
- 적은 인원(1〜2명)으로도 유용한 피드백을 얻을 수 있다
- 작품의 「이해하기 어려운 점」을 구체적으로 발견할 수 있다
- 제작자가 알아차리지 못한 문제나 재미를 찾을 수 있다
실시 절차
역할 분담
- 평가자(체험하는 사람): 상대의 작품을 체험하면서 생각하고 있는 것을 소리 내어 말한다
- 관찰자(제작자): 평가자의 발언・행동・표정을 관찰하고 메모한다
절차
1. 준비(2분)
- 작품을 세팅한다(micro:bit 연결, Pd 패치 실행)
- 캡션이나 작품 설명 시트는 보이지 않는 곳에 둔다(처음에는 설명 없이 체험하게 한다)
- 관찰 기록 시트를 곁에 준비한다
중요: 처음에는 설명하지 않는다
사고 발화법에서는 처음에 조작 방법을 설명하지 않습니다. 「설명 없이 어디까지 전달되는지」를 확인하는 것이 목적입니다. 평가자가 완전히 막혔을 때만 최소한의 힌트를 줍시다.
2. 사고 발화법의 설명(1분)
관찰자는 평가자에게 다음과 같이 요청합니다.
「지금부터 제 작품을 체험해 주세요. 체험 중에는 머릿속에서 생각하는 것을 그대로 소리 내어 말해 주세요. 예를 들어 『이건 뭐지?』『여기를 만졌더니 소리가 바뀌었네』『다음엔 이렇게 해 볼까』 등, 떠오른 것을 그대로 말로 표현해 주시면 도움이 됩니다.」
3. 체험과 관찰(5분)
평가자가 할 일:
- 작품을 자유롭게 만진다
- 생각하고 있는 것을 계속 소리 내어 말한다
- 「지금 무엇을 하려고 하는지」「무슨 일이 일어났는지」「어떻게 느꼈는지」를 말한다
관찰자가 할 일:
- 평가자의 발언 내용 을 메모한다
- 평가자의 표정 을 관찰한다(미소, 당황, 놀람 등)
- 평가자가 조작에서 헤맨 장면 을 기록한다
- 침묵이 이어지면 「지금 무엇을 생각하고 계신가요?」라고 재촉한다
- 평가자가 완전히 막히면 최소한의 힌트를 준다
재촉(프롬프팅)의 문구 예시
- 「지금 무엇을 생각하고 계신가요?」
- 「무엇을 하려고 하시나요?」
- 「방금 조작으로 어떤 일이 일어났나요?」
- 「뭔가 신경 쓰이는 점이 있나요?」
4. 체험 후의 인터뷰(3분)
체험이 끝나면 다음 질문을 해 봅시다.
- 전체적인 인상 --- 「체험해 보니 어떠셨나요?」
- 재미있었던 점 --- 「특히 재미있다고 느낀 부분은 어디인가요?」
- 이해하기 어려웠던 점 --- 「조작에서 헤맨 부분이 있었나요?」
- 개선 아이디어 --- 「이렇게 되면 더 재미있겠다 싶은 점이 있나요?」
5. 역할 교대
평가자와 관찰자를 바꿔서 같은 절차를 반복합니다.
관찰 기록 시트
다음 형식으로 기록을 합시다.
템플릿
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
사고 발화법 관찰 기록 시트
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
【평가자명】
【작품명】
【일시】
■ 체험 중의 기록
| 시간 | 평가자의 행동 | 평가자의 발언 | 표정・반응 |
|------|------------|------------|----------|
| 0:30 | micro:bit를 들어 올렸다 | 「이걸 움직이는 건가?」 | 조금 당황 |
| 1:00 | 좌우로 기울였다 | 「오, 소리가 바뀌었다!」 | 놀람・미소 |
| 1:30 | 손으로 가렸다 | 「어둡게 하면… 아, 다른 소리가 되네」 | 흥미 |
| 2:00 | 버튼을 찾고 있다 | 「다른 건 뭘 할 수 있을까…」 | 탐색 중 |
■ 좋았던 점・재미있었던 점
■ 이해하기 어려웠던 점・조작에서 헤맨 점
■ 개선 아이디어(평가자로부터)
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━기록의 요점
분류해서 정리하기
기록한 내용을 다음 세 가지로 분류합시다.
좋았던 점
- 「재미있다!」고 말한 장면
- 미소나 놀람의 반응이 있었던 장면
- 직관적으로 조작할 수 있었던 장면
이해하기 어려웠던 점
- 「이건 뭐지?」라고 말한 장면
- 조작 방법을 몰라서 멈춘 장면
- 의도와 다른 조작을 한 장면
- 「어라?」 하고 당황한 장면
개선 아이디어
- 평가자에게서 나온 아이디어
- 관찰에서 알아차린 개선 가능성
- 「이렇게 하면 더 잘 전달될지도」 하는 착상
개선 계획의 수립
과제의 우선순위 부여
발견한 과제에 다음 기준으로 우선순위를 매깁니다.
| 우선도 | 기준 | 예 |
|---|---|---|
| 높음 | 조작 방법을 전혀 모른다 | 센서의 사용법이 직관적이지 않다 |
| 높음 | 작품의 콘셉트가 전달되지 않는다 | 무엇을 표현하고 있는지 모른다 |
| 중간 | 조작은 되지만 개선의 여지가 있다 | 소리의 변화가 조금 더 크면 좋겠다 |
| 중간 | 체험의 만족도를 높일 수 있다 | 이펙트를 추가하면 좋겠다 |
| 낮음 | 세세한 조정 | 음량 밸런스의 미세 조정 |
개선책의 목록화
각 과제에 대해 기술적으로 대응 가능한 개선책을 생각해 봅시다.
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
개선 계획 시트
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
과제1:(예: 기울여도 소리의 변화가 작다)
우선도: 높음
개선책: 센서 값의 매핑 범위를 넓힌다
Pd에서의 대응: [* 3] 으로 센서 값을 3배로 한다
과제2:(예: 무엇을 표현하고 있는지 몰랐다)
우선도: 높음
개선책: 환경음(파도 소리)을 배경에 추가한다
Pd에서의 대응: [readsf~] 로 파도 소리 파일을 반복 재생한다
과제3:(예: 버튼의 기능을 모르겠다)
우선도: 중간
개선책: 버튼을 눌렀을 때 LED로 표시를 바꾼다
micro:bit에서의 대응: 버튼 A가 눌렸을 때 아이콘을 변경한다
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━다음 강의를 향해
개선 계획을 바탕으로 제11강・제12강에서 작품을 다듬어 나갑니다. 모든 과제를 해결할 필요는 없습니다. 우선도 「높음」의 과제 를 중심으로 대응합시다.
체크리스트
- [ ] 사고 발화법의 절차를 이해했다
- [ ] 짝의 작품을 체험하고 소리 내어 생각을 전달했다
- [ ] 관찰 기록 시트에 기록을 했다
- [ ] 좋았던 점・이해하기 어려웠던 점을 정리했다
- [ ] 개선 계획을 세웠다