CHAPTER 04 · EXPERIMENT DESIGN CARD
검증 실험을 한 장의 설계서로 완성하기
이번 실습의 목표는 Chapter 01~03에서 만든 핵심 가설, 검증 방법, 성공 기준을 실행 직전 수준의 실험 설계서로 정리하는 것이다. 결과물은 긴 보고서가 아니라 팀이 바로 움직일 수 있는 1장짜리 Test Card다.
Chapter 01~03에서 가져온 설계 원리
1가정은 아직 사실이 아니다
린 캔버스는 가정의 모음이다. 가장 먼저 해야 할 일은 “만들 것인가”가 아니라 “이 가설이 맞는가”를 확인하는 것이다.
핵심: 가장 위험한 가설
2말보다 행동이 강한 증거다
인터뷰와 설문은 문제의 맥락을 찾는 데 좋고, 랜딩페이지·사전예약·결제는 실제 수요를 더 강하게 보여준다.
핵심: 증거 강도
3성공 기준이 있어야 배운다
실험 전 “어떤 지표가 얼마 이상이면 성공인가”를 정해야 결과가 나왔을 때 유지, 개선, 피봇을 판단할 수 있다.
핵심: 측정 지표와 기준치
오늘의 미션 흐름
리스크 우선순위 지도
틀려도 사업이 크게 흔들리지 않고, 이미 근거도 어느 정도 있다.
궁금하지만 지금 큰돈과 시간을 걸 필요는 없다.
사업에 중요하지만 현재 근거가 있다. 실험보다 지표 추적이 먼저다.
틀리면 사업 전체가 흔들리고, 아직 믿을 만한 근거가 부족하다. Chapter 04 설계서는 이 칸의 가설을 대상으로 작성한다.
검증 방법 선택 그래프
증거 강도는 고객이 실제로 부담한 비용이 클수록 높아진다. 초기에는 싸고 빠른 방법으로 시작하되, 최종 판단은 행동 데이터에 가까워져야 한다.
맥락 이해
관심 행동
구매 의향
강한 수요
실습 사례 카드: 끼니어스
타겟 고객
수도권 거주 25~39세 1인 가구 직장인 중 주 3회 이상 야근하는 사람.
문제 가정
평일 저녁을 배달 음식으로 반복 해결하면서 건강·비용 측면의 죄책감과 피로를 느낀다.
솔루션 가정
주 1회 새벽 배송되는 저녁 반찬 정기구독이 요리보다 간편하고 배달보다 건강한 대안이 된다.
실험 설계서 7칸
| 항목 | 작성 질문 | 끼니어스 적용 방향 | 검수 기준 |
|---|---|---|---|
| 1. 검증할 가설 | 누가, 어떤 문제나 행동을 갖고 있다고 믿는가? | 문제/고객, 솔루션, 시장, 채널 중 가장 위험한 1개를 선택한다. | 검증 가능하고 측정 가능한 문장인가? |
| 2. 검증 방법 | 이 가설은 말로 확인할 것인가, 행동으로 확인할 것인가? | 초기 문제 맥락은 인터뷰, 수요 강도는 랜딩페이지나 사전예약으로 본다. | 가설과 방법이 같은 대상을 보고 있는가? |
| 3. 피실험자·채널 | 정확히 누구를 어디에서 몇 명 모집할 것인가? | 직장인 커뮤니티, 개인 소개, 인스타그램 광고를 주/보조 채널로 구분한다. | 표본이 실제 타겟과 일치하는가? |
| 4. 기간·표본 목표 | 며칠 동안 진행하고 최소 몇 명의 데이터를 볼 것인가? | 예: 7일간 방문자 300명 또는 인터뷰 8명처럼 판단 가능한 최소량을 정한다. | 너무 작아 우연에 흔들리지 않는가? |
| 5. 측정 지표 | CTR, 신청 전환율, 대기자 등록률, 결제율 중 무엇을 볼 것인가? | 랜딩페이지라면 방문-신청 전환율, 사전예약이라면 예약 전환율을 쓴다. | 숫자로 남고 다시 비교할 수 있는가? |
| 6. 성공/실패 기준 | 지표가 얼마 이상이면 성공이며, 왜 그 숫자인가? | 예: 신청 전환율 5% 이상이면 성공. 기준치의 근거를 함께 적는다. | 기준치가 실험 후에 바뀌지 않도록 미리 고정됐는가? |
| 7. 결과별 다음 행동 | 성공, 애매함, 실패일 때 각각 무엇을 할 것인가? | 성공하면 다음 가설로 이동하고, 실패하면 고객군·문제·제안 중 무엇을 바꿀지 정한다. | 피봇 방향과 학습 내용이 적혀 있는가? |
한 문장 템플릿
가설: 우리는 [타겟 고객]이 [문제/니즈/행동]을 갖고 있다고 믿는다.
성공 기준: [실험 방법]을 했을 때 [측정 지표]가 [기준치] 이상이면 이 가설은 검증된 것으로 본다.
판단: 성공하면 [다음 가설]로 이동하고, 실패하면 [바꿀 가정]을 수정해 다시 검증한다.
발표와 피드백 보드
3분 발표 구성
발표는 설득용 문장이 아니라 검증 논리를 점검받는 시간이다.
피드백을 받을 질문
- 이 실험으로 정말 그 가설이 검증되는가?
- 모집 채널의 표본이 타겟과 일치하는가?
- 성공 기준의 숫자에 근거가 있는가?
- 더 싸고 빠르게 확인할 방법이 있는가?
최종 제출 패키지
실험 설계서 1부
7개 항목을 모두 채운 1장짜리 설계서를 제출한다.
측정 지표 표
선택한 지표, 기준치, 기준치 근거를 표로 정리한다.
피드백 반영표
받은 피드백 중 반영할 것과 보류할 것을 구분한다.
다음 행동 결정
Go, Improve, Retest, Pivot 중 하나로 다음 실험을 확정한다.
평가 체크리스트
| 검수 항목 | 통과 기준 | 수정 신호 |
|---|---|---|
| 가설 명확성 | 타겟, 문제, 행동, 지표가 한 문장 안에 들어 있다. | “좋아할 것이다”, “필요할 것이다”처럼 판별 불가능한 표현이 남아 있다. |
| 방법 정합성 | 문제 맥락은 인터뷰, 수요 강도는 행동 실험으로 연결했다. | 솔루션을 묻고 있는데 문제 가설을 검증했다고 주장한다. |
| 표본 현실성 | 모집 채널, 기간, 최소 표본 수가 실제 실행 가능한 수준이다. | “많이 모집한다”처럼 숫자와 채널이 비어 있다. |
| 판정 가능성 | 성공, 애매함, 실패 상황별 다음 행동이 미리 정해져 있다. | 결과가 나온 뒤에도 무엇을 해야 할지 결정할 수 없다. |
최종 정리
Chapter 04의 핵심은 “좋은 아이디어 발표”가 아니라 “실험 전 판단 기준 고정”이다. 설계서가 좋으면 실험 결과가 성공이든 실패든 다음 행동이 선명해진다. 실패도 자원을 아껴 준 유효한 학습이 되려면, 가설·방법·지표·기준치가 실험 전에 연결되어 있어야 한다.
강의 근거: 「05. 가설 설계와 검증」 Chapter 01~03 및 Chapter 04 실습 설계서 양식, PDF 3~31쪽.