유저 인터뷰를 열심히 하고도 출시하면 아무도 쓰지 않는 경험, 프로덕트 메이커라면 한 번쯤 겪습니다. 분명 인터뷰에서는 다들 좋다고 했는데 말이죠. 그들이 거짓말을 한 걸까요? 아닙니다. 세 가지가 겹칩니다. 질문의 단어가 사용자의 기억을 바꾸고, 사람은 말과 행동이 다르며, 인터뷰어는 자기가 듣고 싶은 답만 골라 듣습니다. 그래서 “어떻게 생각하세요”라고 물을수록 답은 현실에서 멀어집니다.
해법은 분명합니다. 의견을 묻지 말고 과거의 구체적 행동을 묻고, 인터뷰에서 얻은 말을 행동 데이터로 삼각검증하는 것. 오늘은 유저 인터뷰가 틀린 신호를 만드는 메커니즘과, 오염되지 않는 질문을 설계하는 법을 같이 풀어보겠습니다.
유저 인터뷰가 틀린 답을 주는 세 가지 이유
먼저 문제의 구조부터 정리하겠습니다. 유저 인터뷰의 오류는 사용자의 정직성 문제가 아니라, 질문과 인간 인지의 구조적 문제입니다. 세 가지로 나뉩니다.
| 함정 | 인터뷰에서 벌어지는 일 | 근거 |
|---|---|---|
| 유도 질문 | 질문에 쓴 단어가 사용자의 기억 자체를 바꾼다 | 로프터스·파머 1974 |
| 말-행동 격차 | 하겠다고 말한 것과 실제 행동이 어긋난다 | 라피에르 1934, 현시선호 이론 |
| 확증 편향 | 인터뷰어가 원하는 답에 무게를 더 싣는다 | 니커슨 1998 |
첫째, 질문의 단어가 기억을 재구성합니다. 인지심리학자 엘리자베스 로프터스와 존 파머의 1974년 실험은 이 점을 선명하게 보여줍니다. 참가자 45명에게 같은 교통사고 영상을 보여준 뒤, 자동차 속도를 물으면서 동사 하나만 바꿨습니다. “부딪혔을 때”보다 “박살 났을 때”라고 물은 그룹이 속도를 더 높게 추정했고, 일주일 뒤 “깨진 유리를 봤느냐”는 질문에도 더 많이 “그렇다”고 답했습니다. 영상에는 깨진 유리가 없었는데도 말입니다. 질문의 표현이 없던 기억을 만들어낸 것입니다. “이 기능 편리할 것 같나요”라는 질문은 이미 편리하다는 전제를 답 속에 심어 넣습니다.
둘째, 사람은 말한 대로 행동하지 않습니다. 말과 행동이 어긋나면 사용자가 부정직한 걸까요? 오히려 우리가 질문을 잘못 던진 것에 가깝습니다. 사회학자 리처드 라피에르는 1934년, 당시 차별이 심하던 시기에 중국인 부부와 함께 미국 전역의 식당과 호텔 251곳을 방문했는데 거절당한 곳은 단 한 곳이었습니다. 그런데 6개월 뒤 같은 업소들에 “중국인 손님을 받겠느냐”고 설문했더니, 회신한 128곳 중 92퍼센트가 받지 않겠다고 답했습니다. 말과 행동의 간극이 이렇게 큽니다. 경제학의 현시선호 이론도 같은 통찰을 담습니다. 진짜 선호는 입으로 말한 태도가 아니라 실제로 돈과 시간을 쓴 선택에 드러난다는 것입니다.
셋째, 인터뷰어 자신이 편향의 원천입니다. 인지심리학자 레이먼드 니커슨이 정리한 확증 편향은, 사람이 자기 가설을 확증하는 신호에는 민감하고 반증하는 신호는 흘려보내는 경향을 말합니다. 사용자가 애매하게 웃으며 “괜찮네요”라고 하면 인터뷰어는 이를 긍정으로 기록합니다. 정작 그 사용자는 예의상 답했을 뿐인데도요.
의견을 묻지 말고 과거 행동을 물어라
그렇다면 어떻게 물어야 할까요. 여기서부터가 흥미로운 지점입니다. 원칙은 하나입니다. 미래의 의견이 아니라 과거의 구체적 행동을 캐는 것. 롭 피츠패트릭은 『더 몸 테스트』에서 세 가지 규칙을 제시합니다. 상대의 삶을 말하게 하되 내 아이디어를 말하지 말 것, 미래의 가정이 아니라 과거의 구체적 사실을 물을 것, 그리고 내가 말하는 시간을 줄이고 최소 80퍼센트는 들을 것.
테레사 토레스도 『지속적 발견 습관』에서 같은 지점을 짚습니다. 우리 뇌는 직접적인 질문에 빠르게 답을 지어내지만, 그 답은 최근 기억, 정체성, 되고 싶은 모습에 오염됩니다. “무슨 영상을 즐겨 보세요”라고 물으면 실제로 본 것이 아니라 봤으면 하는 것을 답합니다. 대신 “가장 최근에 영상을 본 게 언제였고, 그때 어디서 무엇을 보셨어요”라고 특정 사건에 묶어두면 실제 행동에 훨씬 가까워집니다.
| 오염된 질문 | 행동 기반 질문 |
|---|---|
| 이 기능 필요하세요? | 가장 최근에 이 문제를 겪은 게 언제였고 그때 어떻게 해결하셨어요? |
| 얼마면 사시겠어요? | 지금 이 문제에 돈이나 시간을 얼마나 쓰고 계세요? |
| 이 화면 어떤가요? | 지난주에 이걸 하려다 막힌 적 있나요? 무슨 일이 있었죠? |
| 자주 쓰실 것 같나요? | 어제 이 앱을 몇 번, 언제 여셨는지 기억나세요? |
왼쪽은 이상형과 희망사항을 부르고, 오른쪽은 이미 일어난 사실을 부릅니다. 관점을 바꿔보면, 좋은 인터뷰는 사용자에게 미래를 예언하게 시키는 자리가 아니라 과거를 증언하게 하는 자리입니다.
인터뷰가 가리킨 답, 행동이 뒤집은 답
이 차이를 몸으로 배운 프로젝트가 있습니다. 예전에 한 이커머스 앱의 특정 카테고리 전환율이 유입 대비 정체된 문제를 맡았습니다. 이용 고객을 심층 인터뷰했더니 다수가 “정보가 부족해서 결제 직전에 망설인다”고 했습니다. 그 말을 믿고 상세 정보를 늘렸지만 전환율은 거의 움직이지 않았습니다. 그제야 행동 로그를 붙여 사용자의 실제 이동 경로를 겹쳐 봤습니다. 병목은 정보량이 아니라 카테고리 정보 구조와 브랜드 비교 흐름이었습니다. 사용자는 정보가 부족한 게 아니라 흩어진 정보 속에서 비교를 포기하고 있었습니다. 정보 구조를 다시 짜고 상품 노출 순서를 바꾸자 정체됐던 전환율이 풀렸습니다. 인터뷰의 말과 로그의 행동을 겹쳐서야 진짜 병목이 보였던 것입니다.
반대로, 소수를 만나도 질문만 정확하면 방향이 잡히는 경험도 있습니다. 시니어 대상 음성 기반 서비스를 기획할 때, 65세 이상 사용자 다섯 분을 심층으로 만났습니다. “이 서비스 어떠세요”가 아니라 “지난달에 은행 일을 보실 때 뭐가 제일 번거로우셨어요”를 물었습니다. 다섯 명이라는 작은 표본에서도 구체적 과거 사건을 캐자 절반 이상에게서 같은 불편이 반복 확인됐고, 그게 솔루션의 방향이 됐습니다. 또 다른 프로젝트에서 청각장애인 고객을 인터뷰할 때는, 질문지 자체를 고객의 언어 체계에 맞춰 다시 썼습니다. 질문의 언어가 답을 좌우한다는 것을 알았기 때문입니다. 로프터스의 실험이 실무에서 반복되는 셈입니다.
정성 인터뷰의 짝은 언제나 정량입니다. 인터뷰로 세운 가설은 A/B 테스트와 행동 로그로 검증해야 완성되고, 무엇을 지표로 볼지는 노스스타 지표를 어떻게 잡았느냐에 달려 있습니다. 이렇게 검증된 사용자 이해가 있어야 좋은 PRD가 기능 나열을 넘어설 수 있습니다.
오염되지 않는 인터뷰를 설계하는 다섯 가지
바로 적용할 수 있게 정리하면 이렇습니다.
- 미래·가정형 질문을 버립니다. “쓰시겠어요”가 아니라 “언제 마지막으로 하셨어요”로 시작합니다. 예언이 아니라 증언을 받습니다.
- 답을 심는 형용사를 지웁니다. 질문에서 “편리한”, “유용한”, “간편한” 같은 수식어를 빼면 사용자가 스스로 판단할 여지가 생깁니다.
- 침묵을 견딥니다. 인터뷰어가 80퍼센트를 들어야 합니다. 3초의 침묵을 참으면 사용자가 진짜 이야기를 꺼냅니다.
- 말을 행동으로 삼각검증합니다. 인터뷰 발언 하나마다 “이걸 로그나 실제 사용으로 확인할 수 있나”를 되묻습니다. 말과 행동이 충돌하면 행동을 믿습니다.
- 반증 질문을 일부러 넣습니다. 확증 편향을 막으려면 내 가설이 틀렸다면 나올 법한 신호를 묻고, 기록은 해석이 아니라 사용자의 원문 그대로 남깁니다.
한 가지 더. 2026년 들어 AI가 만든 합성 사용자로 인터뷰를 대체하려는 시도가 늘고 있습니다. 보조 도구로는 쓸 만하지만 대체재로 보기엔 이릅니다. 리서처의 97퍼센트가 AI를 쓰지만 AI가 만든 참가자를 신뢰한다는 응답은 8퍼센트에 그친다는 조사가 있습니다. 합성 사용자는 학습 데이터의 평균을 그럴듯하게 되풀이할 뿐, 제품 기회가 숨어 있는 아웃라이어와 예상 밖의 반응은 만들어내지 못합니다. 실제 사람을 만나는 이유가 바로 그 예상 밖에 있습니다.
결론
유저 인터뷰의 목적은 내 아이디어에 동의를 받는 것이 아니라, 내 가설이 틀렸다는 걸 값싸게 빨리 발견하는 것입니다. 질문이 바뀌면 답이 바뀝니다. 의견을 물으면 이상형을 얻고, 과거 행동을 물으면 사실을 얻습니다. 그리고 그 사실조차 행동 데이터로 한 번 더 겹쳐 봐야 진짜에 가까워집니다.
작은 실험 하나를 제안합니다. 다음 인터뷰에서 준비한 질문지를 열어, 형용사가 들어간 질문과 미래형 질문에 표시를 해보세요. 그 문장들을 전부 “가장 최근에 언제”로 시작하는 과거형으로 바꿔 쓰면, 같은 사용자에게서 전혀 다른 이야기가 나올 것입니다. 여러분의 프로덕트에서도 시도해보시길 권합니다.
참고 자료
- Loftus, E. F. & Palmer, J. C. (1974). Reconstruction of Automobile Destruction. Journal of Verbal Learning and Verbal Behavior, 13(5).
- LaPiere, R. T. (1934). Attitudes vs. Actions. Social Forces, 13(2).
- Nickerson, R. S. (1998). Confirmation Bias: A Ubiquitous Phenomenon in Many Guises. Review of General Psychology, 2(2).
- Rob Fitzpatrick, 『The Mom Test』 (2013).
- Teresa Torres, 『Continuous Discovery Habits』 (2021).
- Nielsen Norman Group, “Synthetic Users: If, When, and How to Use AI-Generated Research” (2025).