한국어 箭头
Podcast Cover

[정성적 연구와 정량적 데이터의 결합: 제품 의사결정의 핵심 전략]-[How to Have Fun with UX Research (with Laura Klein)]

The Product Manager · B2 · 2024-07-16

Technology
또는 웹버전으로 공부하세요

📋 Summary

정성적 연구와 정량적 데이터의 결합: 제품 의사결정의 핵심 전략

제품 관리의 세계에서 '데이터 기반(data-driven)'이라는 용어는 흔히 사용되지만, 정작 많은 팀이 정성적(qualitative) 데이터와 정량적(quantitative) 데이터를 효과적으로 결합하는 데 어려움을 겪습니다. 제품 전문가 로라 클라인(Laura Klein)은 두 영역을 조화롭게 사용하는 것이 제품의 성공을 좌우하는 핵심 역량이라고 강조합니다.

1. 데이터의 한계와 정성적 통찰의 필요성

많은 제품 관리자가 정량적 지표에만 매몰되어 '무엇이(what)' 일어나고 있는지는 파악하지만, '왜(why)' 그런 일이 발생하는지에 대한 근본적인 이유는 놓치고 있습니다. 로라는 "데이터는 어떤 일이 일어나는지 알려줄 뿐, 왜 일어나는지는 알려주지 않는다"고 지적합니다.

예를 들어, 결제 프로세스에서 사용자가 이탈하는 '깔대기(funnel)' 현상이 발생할 때, 데이터는 이탈 지점을 정확히 짚어주지만 그 해결책은 사용자 인터뷰나 사용성 테스트(usability testing)를 통해서만 명확해집니다. 실제 현장에서 엔지니어가 테스트를 지켜보다가 즉각적으로 버그를 수정해 사용자의 문제를 해결한 사례처럼, 정성적 연구는 가설을 검증하고 즉각적인 개선을 이끄는 강력한 도구입니다.

2. 올바른 질문에서 시작하기

연구의 첫 단추는 '내가 해결하려는 문제가 무엇인가?'를 명확히 정의하는 것입니다. 로라는 대시보드를 보는 것만으로는 부족하며, 특정 기능의 활성화나 고객 이탈 방지 등 구체적인 의사결정 목표가 선행되어야 한다고 조언합니다.

  • 정량적 연구: 제품이 출시된 후, 사용자가 무엇을 클릭하고 구매하는지 등 행동 패턴을 측정하는 데 유용합니다.
  • 정성적 연구: 사용자의 멘탈 모델(mental model), 맥락, 그리고 그들이 제품을 통해 달성하고자 하는 목표를 이해하는 데 필수적입니다.

3. 샘플 사이즈와 패턴 인식

많은 이들이 정량적 데이터의 통계적 유의성에 집착하거나, 정성적 연구의 샘플 사이즈를 고민합니다. 로라는 정성적 연구에서 통계적 유의성을 찾으려 하지 말고, **'예측 가능한 반복되는 패턴'**을 찾는 데 집중해야 한다고 말합니다. 몇 명의 사용자에게서 동일한 문제를 발견했다면, 그것은 우연이 아니라 제품 개선의 중요한 신호입니다. 지속적으로 사용자와 대화하며 관찰 내용을 합성(synthesis)하다 보면 자연스럽게 사용자 그룹의 특성과 문제점을 예측할 수 있게 됩니다.

4. 세분화(Segmentation)의 중요성

제품의 가치는 모든 사용자에게 동일하지 않습니다. 로라는 AI 기능을 예로 들며, 일반 사용자에게는 유용한 AI 도구가 핵심 유료 고객(전문가 그룹)에게는 오히려 방해가 될 수 있음을 지적합니다.

"데이터를 통합해서 보면 다수가 좋아한다고 판단하겠지만, 실제 수익을 창출하는 소수 그룹의 목소리가 묻힐 수 있다"는 점을 경계해야 합니다. 즉, 데이터를 세분화하여 각 그룹이 제품에 가지는 기대치와 비즈니스 가치를 분리해서 분석하는 것이 전략적 의사결정의 핵심입니다.

결론: 연구는 창의적인 과정이다

로라는 연구를 건조하고 시간 낭비적인 작업으로 보지 말고, 사용자의 마음을 들여다보는 '인류학적인 과정'이자 '창의적인 즐거움'으로 접근할 것을 제안합니다. 복잡한 문제를 발견하고 이를 해결하는 과정에서 느끼는 '아하(Aha!) 모먼트'야말로 제품 관리자가 누릴 수 있는 가장 큰 즐거움입니다.

결국 제품의 성공은 정교한 수학적 통계와 사용자의 깊은 맥락을 이해하는 정성적 통찰을 얼마나 능숙하게 결합하느냐에 달려 있습니다.

🎯Key Sentences

1
How do you blend numbers and stories to paint an accurate picture?
어떻게 숫자와 이야기를 엮어 정확한 그림을 그려낼 수 있을까요?
2
they're not looking at the qualitative side of things at all.
그 사람들은 질적인 측면은 전혀 고려하지 않고 있어.
3
we give ourselves the space to learn new things.
우리는 새로운 것을 배울 수 있는 여유를 스스로에게 준다.
4
we admit that we might not know it.
저희가 그걸 모를 수도 있다는 것을 인정합니다.
5
the first step is really trying to figure out what question you're trying to answer.
가장 먼저 해야 할 일은 어떤 질문에 답하려고 하는지 파악하는 것입니다.
모두 펼치기

📝Key Phrases

1
easier said than done
말이야 쉽지.
2
stumble over the same challenges
똑같은 난관에 또다시 부딪히다
3
on the same page
같은 생각이다
4
buy into my way of working
제 방식대로 일하는 것에 동의하다
5
turn people down
거절하다
모두 펼치기

📖 Transcript

Are you more of a left brain or right brain thinker?
If you don't know what I'm talking about, left brain folks tend to be more analytical and metric focused, whereas right brain folks are more likely to use storytelling to make sense of the world.
So when we think about qualitative and quantitative research, you can probably guess which types tend to gravitate to which research methods.
And that's great, we need both after all, but as it turns out, putting the two together is a lot easier said than done.
How do you blend numbers and stories to paint an accurate picture?
And regardless of research method, how do you ensure that your data is any good?

ListenLeap이 실제 문맥에서 학습하도록 이끌어줌

🎨 흥미로운 콘텐츠
🌍 실제 자료
📱 언제든 듣고 보기