신제품·신기능 콘셉트 테스트 방법

콘셉트 테스트는 개발이나 출시에 투자하기 전에 신제품이나 신기능의 콘셉트를 대상 사용자에게 보여 주고, 먼저 첫 반응을 들은 뒤 그것이 참여자의 실제 생활과 어떤 관계가 있는지 묻는 것입니다. 답해야 할 질문은 "사용자가 좋아하는가"가 아니라 "누가 어떤 상황에서 쓰고, 그것을 위해 지금의 방식을 바꿀 의향이 있는가"입니다. 이 글을 읽고 나면 콘셉트 자료를 준비하고, 단일 콘셉트 테스트와 여러 콘셉트 비교 중 하나를 고르고, 가이드 하나로 인터뷰를 진행하면서 구매 의향이 부풀려지는 문제와 참여자가 맞춰 주려는 문제라는 두 가지 흔한 함정을 피할 수 있습니다.

활용 상황과 리서치 목표

• 신제품 기획 전에 대상 집단에게 정말 이런 필요가 있는지 판단할 때.
• 신기능 개발 전에 몇 가지 방향 중에서 선택할 때.
• 출시 전에 메인 셀링 포인트와 카피 표현을 확정할 때.
• 가격이나 요금제 안이 나온 뒤, 사용자가 그 가치를 이해할 수 있는지 확인할 때.

리서치 목표는 의사결정 수준까지 구체적으로 쓰십시오. 예를 들어 "A와 B 두 셀링 포인트 중 메인으로 내세울 하나를 고른다", "이 기능이 어떤 사용자에게 가장 가치 있는지 판단한다"처럼요. 목표가 "사용자가 어떻게 느끼는지 본다"라면 리서치를 마쳐도 결정을 내리기 어렵습니다. 또한 어떤 결과가 나오면 이 콘셉트를 포기할지 미리 적어 두십시오. 그래야 자신을 지지하는 증거만 찾는 일을 막을 수 있습니다.

콘셉트 자료 준비 방법

자료의 역할은 참여자를 설득하는 것이 아니라 콘셉트를 이해시키는 것입니다. 쓸 만한 콘셉트 카드에는 보통 다음이 들어갑니다.

• 누구를 위해, 어떤 문제를, 어떻게 해결하는지 한 문장으로 설명.
• 구체적인 사용 상황 하나. 기능을 나열하지 말고 사람이 무엇을 하고 있는지 씁니다.
• 핵심 정보: 구매 의향을 측정하려면 가격이나 가격대, 그리고 출시 형태를 적습니다.
• 개념도나 와이어프레임 한 장. 이해할 수 있으면 충분하며, 정교한 완성 시안은 필요 없습니다.

표현은 중립적이어야 합니다. "혁신적인", "최고의" 같은 수식어는 빼십시오. 여러 콘셉트의 분량, 이미지 품질, 정보량은 최대한 맞추십시오. 그렇지 않으면 카피와 디자인의 차이를 측정하게 됩니다.

단일 콘셉트인가, 여러 콘셉트 비교인가

여러 콘셉트를 비교할 때는 세 개를 넘기지 않는 것이 좋습니다. 네 번째를 볼 즈음이면 참여자가 이미 구분하기 어려워합니다. 하나를 볼 때마다 첫 반응을 먼저 묻고, 한꺼번에 늘어놓고 고르게 하지 마십시오.

인터뷰 가이드

첫 반응을 먼저 묻고, 구매 의향은 그다음에

첫 반응은 어떤 설명보다도 먼저 물어야 합니다. 참여자에게 콘셉트를 본인 말로 다시 설명하게 하면 자료가 제대로 전달됐는지 알 수 있습니다. 잘못 설명했다면 이후의 평가는 모두 오해 위에 서 있는 것이므로 따로 기록해 두십시오.

구매 의향은 가장 쉽게 부풀려집니다. "살 것 같다"고 말하는 데는 비용이 들지 않지만, 실제로 사려면 돈을 내고 습관을 바꿔야 합니다. Rob Fitzpatrick은 『The Mom Test』(2013)에서 미래에 대한 상상은 덜 묻고 과거에 있었던 일을 더 물으라고 권합니다. 더 믿을 만한 질문 방식은 다음과 같습니다.

• 과거 행동 묻기: 이 문제에 돈을 써 보신 적이 있나요? 어떤 대안을 써 보셨어요? 돈을 쓴 적도, 방법을 찾아본 적도 없는 사람이 사겠다고 하면 그 무게는 할인해서 봐야 합니다.
• 다음 행동 묻기: 오늘 출시된다면 가장 먼저 무엇을 하시겠어요? 구체적인 행동을 말할 수 있는 사람이 "고려해 볼게요"라고만 하는 사람보다 믿을 만합니다.
• 작은 약속 요청하기: 출시 알림을 받으려고 연락처를 남기거나, 체험을 예약하거나, 대기자 명단에 등록하는 행동이 말로 하는 의향보다 많은 것을 말해 줍니다.
• 가격을 보여 주고 묻기: 의향은 가격을 본 뒤에 물어야 합니다. 가격 없이 묻는 의향은 참고할 가치가 거의 없습니다.

참여자가 맞춰 주려는 것을 피하는 방법

• 콘셉트가 아직 확정되지 않았고, 비판과 칭찬 모두 똑같이 도움이 된다고 설명합니다.
• 인터뷰어는 "저희가 설계한"이라고 말하지 않고, 답변에 만족이나 실망을 드러내지 않습니다.
• "마음에 드세요?" 같은 유도 질문은 하지 않고, "언제 쓰시게 될까요?"라고 묻습니다.
• 참여자에게 다른 사람 입장에서 단점을 찾게 하기: 누가 이걸 안 쓸 것 같으세요? 왜요?
• 칭찬은 배경 소음으로 여기고, 구체적인 상황과 과거 행동만 기록합니다.

예시 대화: "쓸 것 같다"에서 진짜 걸림돌까지 파고들기

가상의 예시 대화입니다. 참여자는 처음에 "쓸 것 같다"고 했지만, 과거 행동을 물어보니 진짜 걸림돌은 입력 단계에 있었습니다. 이 정보가 "쓸 것 같다"는 한마디보다 다음 단계에 훨씬 도움이 됩니다.

결론 정리 방법

1. 먼저 이해도를 봅니다: 참여자 중 몇 명이 콘셉트를 정확히 다시 설명했는지, 오해는 어디에 몰려 있는지. 예: 참여자 20명 중 6명이 기능을 다른 것으로 이해했다면 자료를 고쳐야 한다는 뜻입니다.
2. 다음으로 관련성을 봅니다: 누가 어떤 상황에서 필요로 하는지, 사용자 그룹별로 나눠 봅니다.
3. 첫 반응과 후속 질문 이후의 판단을 구분하고, 후속 질문 뒤 태도가 바뀐 경우는 따로 표시합니다.
4. 구매 의향은 근거의 강도에 따라 나눕니다: 돈을 내거나 대안을 쓴 적이 있는 사람, 구체적인 다음 행동을 말할 수 있는 사람, 말로만 사겠다고 한 사람.
5. 여러 콘셉트를 비교할 때는 선호와 이유를 함께 쓰고, 콘셉트마다 반례가 있어야 합니다.
6. 결론은 의사결정으로 연결합니다: 할지 말지, 어느 것을 고를지, 어디를 고칠지.

행동 데이터로 결론 검증하기

• 선별 단계: 행동 데이터로 실제로 관련 행동을 하는 사람을 찾습니다. 이미 대안을 쓰고 있거나 최근 관련 기능을 자주 쓴 사용자처럼요. 그래야 대상 집단이 아닌 사람을 인터뷰하는 일을 피할 수 있습니다.
• 출시 전: 페이크 도어 테스트나 대기자 명단으로 실제 클릭과 등록을 보고, 인터뷰에서 나온 의향과 비교합니다.
• 출시 후: 결론에 맞춰 지표를 정합니다. 선택한 셀링 포인트는 상세 페이지 전환율을, 새 기능은 사용률과 리텐션을 봅니다.
• 말과 행동 대조: 인터뷰에서는 쓰겠다고 했는데 데이터에서는 쓰지 않은 사람을 한 번 더 인터뷰하면, 콘셉트 테스트에서 잡아내지 못한 걸림돌을 찾을 때가 많습니다.