PMF 여정에서 찾은 NDS라는 매력적인 지표
Editor 보민's comment
이 글은 슬립 테크 스타트업 무니스의 대표 권서현님이 쓴 PMF 여정에서 찾은 NDS라는 매력적인 지표 입니다. ‘린 분석’이라는 책에는 이런 내용이 나오는데요. ‘스타트업의 성공 핵심 중 하나는 정확한 초점(목표 혹은 방향)을 정하고 그것을 계속 유지하는 것이다.’ 또 다른 말로 ‘현재 단계에서 매우 중요한 한 가지 지표(OMTM)를 선택하고 꾸준히 모니터링하는 것’이라고도 이야기합니다. 이 글에서는 실제 초기 스타트업의 사례를 중심으로 현재 단계에서 가장 중요한 한 가지 지표(OMTM)을 선택하기 위해서 어떤 고민을 했는지, 왜 그 지표를 선택했는지를 생생하게 들어볼 수 있어요.
PMF; 창업을 시작하고 지금까지 (과장을 조금 보태서) 한 만 번은 말해본 것 같다. 오늘 글에서는 PMF의 달성을 데이터로 확인할 때 유용하게 활용할 수 있는 지표인 NDS를 소개해보고자 한다.
PMF란 무엇인가?
디스콰이엇에 있는 메이커분들이시라면 아마 PMF는 익히 들어 잘 알고 있을 것 같다. 처음 스스로 PMF를 정의할 때 PMF는 강렬하고 꾸준한 시장의 반응이라고 생각했다. 그렇게 몇 개월을 보내던 중, 마이클 세이벨의 팩폭을 듣고 PMF를 스스로 재정립하는 시간이 있었다.(유튜브 링크) 마이클은 PMF인지 알고 싶다면 두 가지 질문을 답하라고 한다:
Is the growth almost killing you? and is it profitable?
나는 이 질문 두 개가 너무 간결하고 확실해서 좋다. 1) 시장에서의 파괴적인 반응 2) 미친듯이 쌓이는 돈. 이 두 가지는 PMF의 확실한 징표이다.
PMF를 달성했는지 어떻게 알 수 있는가?
문제는 위 두 가지 질문의 답은 추상적이라는 것이다. 파괴적인 반응은 무엇일까? 어느 정도가 파괴적인 것일까? 미친듯이 쌓이는 돈은 그 정도가 얼마나 되어야 하는가? 그리고 그 속도는 어느 정도여야 하는가?
사실 이러한 질문들은 이미 달성한 팀이 보면 웃기다고 한다. 마크 안드리센은 PMF를 찾았는지의 여부는 느낌만으로도 알 수 있다고 했다.
하지만 우리는 아직 PMF를 찾기 전이고, PMF를 찾는 방향으로 프로덕트를 성장시켜야 한다. 그래서 PMF를 달성했는지에 대한 여부를 확인할 수 있는 조금 더 실질적이고 확실한 지표를 세우기로 했다.
PMF의 가능성을 알려주는 지표 후보는 다음과 같다:
Retention Rates
가장 흔히 사용하는 지표이다. 리텐션이 높다면 사람들이 계속 찾아 돌아오는 프로덕트라는 뜻이기에 의미가 있다. 다음 차트는 chameleon에서 가져온 것인데 3개월 이내로 리텐션이 10% 미만이라면 PMF일 가능성이 낮다고 한다. 반대로 3개월 이내로 20%대를 유지한다면 PMF일 가능성이 높다고 한다.
retention_curve_pmf.png
LTV:CAC 비율
보통 SaaS에서 많이 사용하는 지표이다. 만약 고객을 유치하기 위해 비용을 많이 투자하고 있다면 지켜볼만한 지표이다. 비율이 3:1일 때 PMF일 가능성이 높다고 하는데, 당연히 Profitable이라는 목표치를 달성했기에 그럴 수 밖에 없다.
NPS
서비스를 사용하며 여기 저기서 항상 보이는 Net Promoter Score이다. 실제 에어비앤비 데이터 분석가의 말에 따르면 NPS가 다른 지표들보다 재예약률 예측에 가장 유용했다고 한다. 그만큼 서비스에 대한 애정과 관심도를 확인할 수 있는 좋은 지표이다.
NDS
마지막으로, 오늘 이 글의 주제인 Net Disappointment Score이다. NDS는 스타트업씬에서 아직 크게 알려지지 않은 지표인 것 같다.(네이버에서 검색해도 잘 안 보인다) NDS는 고객에게 서비스가 없다면 어떻게 느낄 것 같은지 물어보고 Very Disappointed(매우 실망할 것 같다)의 비율을 계산한다. 이때 Very Disappointed의 비율이 40%가 넘어가면 PMF를 달성했을 가능성이 매우 높다고 한다. 아래 차트는 Superhuman 서비스의 초창기 NDS이다.
superhuman_nds.png
NDS에 대해 조금 더 자세히 이야기 해보자.
Superhuman은 이메일 관리 툴이다. 누적 투자금 1500억원으로 현재 빠르게 성장하는 스타트업 중 하나이다. 이들은 초기에 NDS를 활용하여 PMF를 달성하는 방향으로 서비스를 개선하였다. (CEO Raul Vohra의 아티클 원문) 그들의 서비스 개선 방향은 다음과 같다:
고객 유형과 각 유형의 특징을 분석한다. 
Superhuman은 Very Disappointed 그룹에 집중하였다. 이들은 어떤 특징을 가진 사람들이고, 어떤 행동양식을 하는지 집중했다. 그 결과 Very Disappointed 그룹은 업무가 매우 바쁘고 업부의 많은 부분이 이메일로 이뤄지는 고객이었다.
서비스의 강점과 개선 포인트를 찾는다. 
Very Disappointed 그룹은 Superhuman을 사용하며 "이메일을 처리하고 정리하는 속도가 좋다"고 했다. 반대로 Somewhat Disappointed 그룹은 "캘린더 기능과 모바일 앱 버전 등이 부재하여 불편하다"고 했다. 이렇게 Very Disappointed 그룹의 피드백으로 어떤 핵심 기능이 시장에서 반응을 보이고 있고, Somewhat Disappointed 그룹의 피드백으로 어떻게 더 좋은 방향으로 개선할지 확인하였다.
우선순위에 따라 서비스 개선한다.
Superhuman은 비용과 임팩트(낮음, 보통, 높음)를 기준으로 빠르게 개선점들을 고쳐나갔다.
꾸준히 지표 추적한다.
그리고 Superhuman은 NDS를 꾸준히 추적했다. 그 결과, 2017년 Very Disappointed 비율이 22%였지만 불과 9개월만에 58%를 달성할 수 있었다고 한다.
nds_result.png
우리는 왜 NDS를 선택했는가
우리 팀은 PMF를 찾았는지, 그리고 우리의 노력이 그 방향으로 성장하고 있는지 항상 보고 있을 지표가 필요했다. 그 지표로 NDS를 선택하기까지 정말 많은 고민이 있었다. OMTM을 설정하기까지 거의 2달이 걸렸으니 시간도 정말 많이 투자했다. 왜 NDS였을까?
Retention Rate
Retention Rate를 올려야 하는 것이 우리의 목적이라면, 할 수 있는 액션이 많았다. 푸시 알람으로 앱을 계속 리마인드 시킬 수 있었고, 주요 서비스 기능 외에 다양한 재미 요소를 넣어 Engagement를 높일 수 있었다. 하지만 이것이 과연 우리의 서비스가 시장과 맞아 떨어졌는지를 보여주는지 확신할 수 없었다. 즉, 우리 서비스의 핵심 가치를 고객이 정말 "가치"로 받아드리고 있는지 확인하기 어려웠다.
LTV:CAC
개인적으로 이 지표는 퍼포먼스 마케팅 역량에 큰 영향을 받는다고 생각한다. LTV를 인위적으로 올리기는 어렵지만 CAC는 정말 극적으로 효율적인 마케팅을 실행한다면 떨어질 수 있다고 생각한다. 그리고 위와 같이 고객의 핵심 가치 검증 부분이 채워지지 않는다고 생각했다.
NPS
우리 앱은 수면 앱(미라클나잇)이다. 그래서 서비스 특성 상 "혼자"사용하는 것이 당연하다. 그리고 사람마다 듣는 취향이 다르기 때문에 우리가 제공하는 소리가 과연 다른 사람들에게도 적합한지 떠올리는 것을 고객들이 이상하게 여겼다.
NDS
이 중에서 가장 서비스의 본질을 볼 수 있는 지표라고 판단했다. 우리 앱이 사라진다면 당신은 정말 아쉬워서 우리에게 개인 디엠이나 이메일을 보낼 사람인가? 그 사람들의 비율은 어느 정도인가? 이것이 바로 우리가 제공하는 핵심 가치를 정말 "가치"로 받아드린 사람들이라고 판단한다.
NDS 도입 22일차
우리의 NDS는 "만약 미라클나잇을 더 이상 사용할 수 없게 된다면 어떤 기분이 들 것 같나요?"라는 질문에 4가지 답변 옵션을 제공한다.
너무 실망스러울 것 같아요.
조금 아쉬울 것 같아요.
있으면 쓰겠지만 아쉽진 않아요.
전혀 실망스럽지 않아요.
도입 7일차에 97명 중 26명이 "너무 실망스러울 것 같아요"를 답변하여 우리 서비스는 26.8%로 시작하였다.
munis_nds_1.png
NDS를 도입한지 벌써 22일차가 되었다. 매일이 심판을 기다리는 것 처럼 무섭고 재밌다. 그리고 행복하게도 오르고 있다. 오늘(9/7) 기준 우리 서비스의 평균 NDS는 30%이다.
munis_nds_distridution.png
1달 후엔 목표치인 35%를 달성해보려고 한다. 우리 서비스 고객의 귀여운 VOC를 끝으로 글을 마무리한다. 우리 모두 PMF를 찾아 하루 빨리 우주로 날아오를 수 있길..!
munis_voc.png


우리 프로덕트는 처음부터 좋은 리텐션을 보이지 않았다. NDS를 개선하는 스프린트를 진행하며 Retention은 자동으로 따라왔다.

리텐션이 웃다니

conversion_type

시리즈 내 순서

conversion_text

멤버 전용

대표 이미지

공개 가능

작성일

예상 읽기 시간

전환 텍스트

글쓴이

시리즈

상단 노출

전환 유형

요약

제목

데이터를 모아도 어떻게 분석하는 지 모르면 그 데이터는 하나도 쓸모가 없다

프로덕트 메이커가 데이터 제대로 보는 방법

PMF를 달성했는지 어떻게 알 수 있는가?

NDS에 대해 조금 더 자세히 이야기 해보자.

PMF 여정에서 찾은 NDS라는 매력적인 지표

Contents

함께 읽어보면 좋은 글

구매 전환율 급상승 후기

카톡 제쳤던 그 사이드프로젝트, 유저 그로스를 하지 않기로 했다

직방, 다방, 네이버 부동산, 집토스 뭐가 다를까?

데이터 분석 소식을
한 달에 한 번 받아보세요