Amplitude로 더 나은 테스트, 학습 및 반복

제품 관리자로서 고객이 원하는 방식이 아니라 고객이 제품을 사용하는 방식을 이해하는 것이 중요합니다. 이러한 현실을 이해하는 가장 좋은 방법은 데이터를 통하는 것입니다. 올바른 데이터가 없으면 앞으로 나아갈 수 없습니다.

2019년 마케팅 인턴으로 CloudApp에 합류했습니다. 현재 저는 셀프 서비스 수익 성장을 담당하는 제품 관리 팀의 일원입니다. CloudApp에 처음 합류했을 때 우리는 우리의 가정에 도전하거나 검증할 방법이 없었고 많은 가정을 했습니다. CloudApp은 공유 가능하고 주석이 달린 비디오, 녹음 및 GIF를 통해 즉각적인 비즈니스 커뮤니케이션을 생성합니다. 우리는 제품에 대한 작업 이상을 수행합니다. 우리 모두도 제품을 사용합니다. 그러나 그것은 최종 고객이 CloudApp을 사용하는 방식과 개별 사용자가 엔터프라이즈 사용자와 어떻게 다른지에 대한 우리의 해석에 색을 입히기 시작했습니다.

앞으로 나아가기 위해서는 인식보다 현실에 따라 행동해야 합니다. 그리고 데이터 없이는 할 수 없습니다.

가장 큰 문제는 데이터 부족이었습니다. 여러 번 누군가 Y를 더 좋게 만들기 위해 X를 변경하자고 제안했지만 이러한 제안은 사실이 아니라 우리의 가정에 기반했습니다. 우리는 많은 사용자 인터뷰를 수행했으며 그 인터뷰는 훌륭한 질적 정보를 제공했지만 반드시 전체 청중을 대표하지는 않았습니다. 수십만 명의 사용자가 있는 경우 데이터 없이는 더 큰 그림을 볼 수 없습니다. 제품을 향상시키는 방법을 결정하기 위해 우리는 선입견에서 분리해야 했습니다. 이를 수행하는 가장 좋은 방법은 테스트한 다음 해당 테스트 결과를 사용하여 반복하고 개선하는 것입니다.

테스트 개선을 위한 새로운 솔루션

우리는 이전에 제품 분석 기능은 있지만 A/B 테스트 기능이 없고 기능 세트가 제한된 Woopra라는 고객 분석 플랫폼을 사용했습니다. 그런 다음 이전 회사에서 Amplitude를 사용한 새로운 수석 제품 관리자를 고용했습니다. 그는 Amplitude를 사용하면 다양한 유형의 사용자 집단을 만들고 A/B 테스트를 통해 실험을 추적할 수 있을 것이라고 설명했습니다. Amplitude는 올인원 솔루션이었습니다. A/B 테스트를 통해 데이터를 드릴다운할 수 있었지만 영향 분석, 집계된 사용자 흐름을 탐색하는 경로 찾기 기능, 참여 및 참여를 유도하는 요인을 이해하는 데 도움이 되는 고정 차트도 제공했습니다. 보유.

일부 플랫폼은 시작하기 위해 데이터 과학 학위가 필요하지만 Amplitude는 직관적이고 배우기 쉽습니다.

우리는 플랫폼에 온보딩하기로 결정했습니다. 간단한 공식 교육 후 CloudApp의 화면 녹화 도구를 사용하여 사람들에게 Amplitude를 소개하고 기본 사항을 가르친 비디오 모음을 만들었습니다. 이러한 비디오는 지속적인 교육 기회를 제공했으며 사람들은 스스로 탐색하고 유기적으로 배우기 시작했습니다. 일부 플랫폼은 시작하기 위해 데이터 과학 학위가 필요하지만 Amplitude는 직관적이고 배우기 쉽습니다.

교차 기능 사용 사례로 지식 증가

오늘날 우리의 모든 팀은 Amplitude를 사용하고 있으며 우리가 애용하는 분석 플랫폼이 되었습니다. 우리 경영진은 이를 사용하여 높은 수준의 메트릭을 추적합니다. 저는 이 변경 사항이 제품의 다른 부분에 영향을 미치는지 여부를 조사하면서 실험을 추적하는 데 사용합니다. 마케팅에서는 유입경로 상단의 성장, 가입 기여도 및 전환한 사람들의 페르소나를 살펴보고 해당 획득 영역을 가장 잘 두 배로 늘리는 방법을 결정합니다. 당사 영업 팀은 개별 계정을 조사하여 해당 계정이 CloudApp 기능을 사용하는 방식과 고객 가치를 높일 수 있는 부분을 조사합니다. 한편, 고객 성공 팀은 Amplitude를 사용하여 사용자 경험을 저해하는 잠재적인 문제와 버그를 식별합니다. 우리 엔지니어링 팀은 특히 새로운 기능을 출시할 때 Amplitude를 사용하여 안정성 및 오류 메트릭을 추적합니다.

진폭은 모든 사람이 우리의 강점과 약점을 객관적으로 이해할 수 있도록 도와줍니다. 가장 큰 영향을 미치는 영역을 식별하고 해당 영향을 추적할 수 있습니다. Amplitude의 가장 큰 장점 중 하나는 공유의 용이성입니다. 내가 만든 차트를 공유하고 싶다면 해당 차트에 대한 링크를 복사하여 다른 사람들이 볼 수 있도록 Slack에 붙여넣을 수 있습니다. 나는 일반적으로 컨텍스트와 명확성을 추가하는 데 도움이 되도록 차트와 함께 보내는 내용을 설명하는 짧은 CloudApp 비디오를 만듭니다. 그런 다음 우리는 그 숫자가 의미하는 것과 우리가 거기에서 어디로 가는지에 대해 더 폭넓은 토론을 할 수 있습니다. Amplitude는 모든 사람이 직접 데이터를 보고, 같은 페이지를 보고, 더 나은 현실을 향한 작업을 시작할 수 있도록 도와줍니다.

제품 개선을 위한 과학적 방법 채택

Amplitude는 협업을 촉진하는 것 외에도 전반적인 비즈니스 목표를 달성하는 데 도움이 되었습니다. 활성화 프로세스를 조정하여 Amplitude를 채택한 이후로 유지율이 향상되었습니다.

이전 흐름에서 사용자는 가입하고 요금제를 선택하고 자신에 대한 정보를 제공하고 마침내 앱을 다운로드했습니다. 그래야만 그들은 제품을 사용하고 그 가치를 보기 시작할 수 있습니다. 우리는 다른 회사와 비슷한 것을 보았기 때문에 그 흐름을 만들었으며 우리는 그대로 따랐습니다. 그러나 Amplitude는 이 흐름이 우리가 원하는 만큼 사용자를 참여시키지 않는다는 것을 보여주었습니다. 실제로 사용자가 계정을 활성화하는 데 방해가 되었습니다. 결과적으로 온보딩 프로세스를 크게 단축하여 계획 및 가격 책정 단계를 완전히 제거했습니다. 사용자는 이제 앱에 들어가서 사용해 보고 가치를 미리 볼 수 있습니다. 이 변경으로 전환율이 향상되었으며 유지율이 51% 증가했습니다.

다른 실험에서는 Amplitude의 영향 차트를 사용하여 특정 기능에 대한 참여가 다른 기능에 미치는 영향을 조사했습니다. 사용자 행동을 이해함으로써 우리는 그것에 영향을 미치고 사용자가 더 광범위한 기능 세트를 탐색하도록 장려할 수 있습니다.

Amplitude는 가설 생성, 가설 테스트, 결과 분석 및 반복과 같은 과학적 방법을 사용자 채택에 적용하는 데 도움이 됩니다.

또한 가설을 만들고, 실험을 통해 가설을 테스트하고, 결과를 분석하고, 반복하는 등 과학적 방법을 작업에 적용하는 데 도움이 되었습니다. 우리는 모든 실험에서 배우고 우리가 배운 것을 바탕으로 주기를 새롭게 시작합니다.

우리는 다양한 플랫폼에 걸쳐 마케팅 웹사이트, 제품 웹사이트 및 클라이언트를 보유하고 있습니다. 우리는 이러한 서로 다른 소스에서 데이터를 수집하고 Amplitude에서 결합합니다. 셀프 서비스 수익에 영향을 미치기 위해 Amplitude를 사용하여 전환율 및 변경의 다운스트림 영향과 같은 측정항목을 추적합니다. 우리는 나중에 많은 고객을 몰아낼 변경 사항으로 현재 소수의 사용자를 전환하고 싶지 않습니다. Amplitude는 하나의 대시보드에서 이러한 비즈니스 메트릭의 균형을 유지하고 우리가 보는 것을 기반으로 우선 순위를 지정하는 데 도움이 됩니다.

진실의 단일 출처 찾기

Amplitude가 없었다면 고객 분석 플랫폼과 별도로 실험용으로 설계된 독립 실행형 제품을 찾아야 했을 것입니다. 그러나 테스트-학습-반복 프로세스는 더 큰 컨텍스트 내에서 해당 테스트 결과를 볼 수 있는 기능이 없었다면 분리되었을 것입니다. Amplitude를 사용하면 잘못된 경로로 시간을 낭비하지 않습니다. 특히 새로운 경험을 만들 때 제품 팀에서 더 나은 데이터 기반 결정을 내립니다.

Amplitude는 CloudApp의 단일 정보 소스가 되었습니다. 가장 매력적인 터치포인트와 개선할 영역을 식별할 수 있을 때 고객에게 가장 큰 효과를 줄 수 있습니다. 데이터는 일하는 방식을 바꿀 수 있습니다. Amplitude는 우리에게 조직 전체에서 해당 데이터를 활용하고 앞으로 나아갈 수 있는 능력을 주었습니다.

지금 무료 Dummies Book을 다운로드하여 Amplitude 및 제품 분석에 대해 자세히 알아보십시오!