기능을 추가하기 전에, 어떤 결과를 바꾸고 싶은가
비즈니스 목표를 기능과 사용자 행동으로 연결하고, 정량적 기록과 정성적 관찰을 함께 보며 개선을 판단하는 방법을 생각해봤습니다.
새로운 기능 이야기를 하면 자연스럽게 무엇을 만들지부터 정하게 된다. 검색을 추가하고, 알림을 보내고, 대시보드를 만드는 식이다.
그런데 기능 목록이 구체적이어도 기대하는 결과는 모호한 경우가 있다.
‘사용성을 개선한다’는 말에 모두 동의하면서도 어떤 행동이 달라져야 하는지는 서로 다르게 생각할 수 있다.
그래서 구현을 이야기하기 전에 먼저 묻고 싶다.
이 기능이 생기면 누구의 어떤 일이 나아져야 할까?
목표를 사용자 행동까지 내려보기
반복 문의가 많아 운영 시간이 부족한 서비스를 가정해보자. 실제 성과 사례가 아닌, 판단의 흐름을 설명하기 위한 예다.
문의가 줄면 좋겠다는 목표에서 바로 도움말 기능을 만들기로 할 수도 있다. 하지만 문의가 많은 이유는 아직 모른다.
신청 상태를 알 수 없어서인지, 결과 문장이 어려워서인지, 예외 상황에서 다음 행동을 찾지 못해서인지 확인해야 한다.
상태 문의가 주요 원인이라면, 사용자가 현재 상태와 다음 단계를 스스로 확인하도록 돕는 것이 하나의 가설이 될 수 있다.
이렇게 목표를 구체적인 사용자 행동과 연결하면 어떤 기능이 필요한지도 더 분명해진다.
줄이고 싶은 숫자가 좋은 결과를 뜻하는지
문의가 줄었다고 모두 좋은 것은 아니다. 문의 경로가 찾기 어려워졌거나, 답을 얻지 못한 사용자가 포기했을 수도 있다.
그래서 문의 건수만 보는 것은 부족하다.
상태 확인 뒤 필요한 행동을 이어갔는지, 신청 완료율이 떨어지지 않았는지, 해결되지 않은 문의가 반복되는지도 함께 보고 싶다.
운영 시간이 줄어드는 비즈니스 목표와 사용자가 일을 마치는 결과를 연결해야 한다. 고객 지원의 부담을 사용자에게 옮긴 것은 아닌지도 확인할 필요가 있다.
측정할 숫자의 기준부터 맞추기
숫자를 정했다면 무엇을 세는지 먼저 합의해야 한다.
문의 메시지 수인지, 문의한 사람 수인지, 같은 문제를 다룬 문의 건수인지에 따라 의미가 달라진다. 한 사람이 세 번 연락한 것을 서로 다른 문의로 셀 수도 있기 때문이다.
비교 기간과 대상도 맞춰야 한다. 사용자가 늘었는데 문의 총건수만 비교하면 실제 변화와 다르게 판단할 수 있다.
표본이 적거나 기록이 빠진 기간이라면 그것도 함께 남겨두고 싶다. 정확한 숫자처럼 보여도 판단에 사용할 수 있는 범위는 제한될 수 있다.
지표를 정하는 일에는 측정할 방법과 해석할 조건을 정하는 일까지 포함된다.
기록에서 찾은 질문을 사람에게 확인하기
수치가 알려주는 것은 변화가 일어난 위치와 규모인 경우가 많다. 그 이유는 추가로 확인해야 한다.
상태 확인 화면을 연 뒤 이탈이 많다면 내용을 이해하지 못한 것인지, 이미 필요한 정보를 얻어 떠난 것인지 로그만으로 단정하기 어렵다.
일부 사용자와 짧게 대화하거나 실제 사용하는 모습을 보면서 해석을 보완할 수 있겠다.
개선안을 만든 뒤에도 비슷하다. 문의가 줄었는데 사용자는 여전히 불안하다고 말한다면 숫자와 경험 사이에 남아 있는 문제가 있을 것이다.
정량적 기록과 정성적 관찰을 함께 쓰면 다음에 무엇을 바꿀지 더 구체적으로 결정할 수 있다.
개선안을 비교할 때의 설명
문제가 확인돼도 해결책은 하나가 아닐 수 있다.
안내 문장을 바꿀지, 상태 정보를 추가할지, 알림을 보낼지 비교할 수 있다. 각각이 기대하는 행동에 어떤 영향을 줄지, 구현과 운영 비용은 어떤지 함께 살펴야 한다.
디자이너와 개발자에게는 필요한 행동과 조건을 설명하고, 의사결정자에게는 기대하는 결과와 확인할 근거를 설명해야 할 것 같다.
확신이 부족하다면 작은 범위로 먼저 확인하는 선택도 있다. 개선 이후의 기준을 미리 정해두면 기능이 배포됐다는 사실만으로 작업을 끝내지 않을 수 있다.
나는 기능 개수보다 목표와 기능 사이의 연결을 설명할 수 있는 기획을 하고 싶다.
이 기능을 계속 유지할 이유를, 사용자의 행동과 제품의 결과로 설명할 수 있을까?