Testuj, ucz się i iteruj lepiej dzięki amplitudzie

Opublikowany: 2022-03-14

Jako menedżer produktu ważne jest, aby zrozumieć, w jaki sposób Twoi klienci korzystają z Twojego produktu — a nie w jaki sposób chcesz, aby go używali. Najlepszym sposobem zrozumienia tej rzeczywistości są dane. Bez odpowiednich danych nie możesz iść do przodu.

Do CloudApp dołączyłem w 2019 roku jako praktykant ds. marketingu. Obecnie należę do zespołu zarządzania produktami odpowiedzialnego za wzrost przychodów z samoobsługi. Kiedy po raz pierwszy dołączyłem do CloudApp, nie mieliśmy możliwości kwestionowania ani weryfikowania naszych założeń — a mieliśmy wiele założeń. CloudApp tworzy natychmiastową komunikację biznesową za pomocą udostępnianych, opatrzonych adnotacjami filmów, nagrań i GIF-ów. Robimy więcej niż tylko pracujemy nad produktem; wszyscy też korzystamy z produktu. Ale to zaczęło zabarwiać naszą interpretację tego, w jaki sposób nasi klienci końcowi korzystali z CloudApp i czym różnili się użytkownicy indywidualni od użytkowników korporacyjnych.

Aby iść naprzód, musisz działać na rzeczywistości, a nie na percepcji. I nie da się tego zrobić bez danych.

Największym problemem był brak danych. Wiele razy ktoś proponował zmianę X, aby uczynić Y lepszym, ale te sugestie były oparte na naszych założeniach, a nie na faktach. Przeprowadziliśmy wiele wywiadów z użytkownikami, które oferowały świetne informacje jakościowe, ale niekoniecznie reprezentowały całą naszą publiczność. Kiedy masz setki tysięcy użytkowników, nie da się zobaczyć tego większego obrazu bez danych. Aby określić, jak ulepszyć nasz produkt, musieliśmy oddzielić się od naszych z góry przyjętych wyobrażeń. Najlepszym sposobem na to było przetestowanie, a następnie wykorzystanie wyników testów do iteracji i ulepszania.

Nowe rozwiązanie usprawniające testowanie

Wcześniej korzystaliśmy z platformy do analizy klientów o nazwie Woopra, która miała możliwości analizy produktów, ale nie posiadała funkcji testowania A/B i miała ograniczony zestaw funkcji. Następnie zatrudniliśmy nowego głównego menedżera produktu, który korzystał z Amplitude w poprzedniej firmie. Wyjaśnił, że użycie Amplitude pozwoliłoby nam tworzyć kohorty różnych typów użytkowników i śledzić eksperymenty poprzez testy A/B, które chcieliśmy zwiększyć. Amplituda była rozwiązaniem typu „wszystko w jednym”: mogliśmy analizować dane za pomocą testów A/B, ale oferowała ona również analizę wpływu, funkcję wyszukiwania ścieżek do badania zagregowanych przepływów użytkowników oraz wykresy lepkości, które pomagały nam zrozumieć czynniki napędzające zaangażowanie i zatrzymanie.

Niektóre platformy wymagają stopnia naukowego w zakresie danych, aby zacząć, ale Amplitude jest intuicyjna i łatwa do nauczenia.

Zdecydowaliśmy się wejść na platformę. Po krótkim formalnym szkoleniu użyliśmy narzędzia do nagrywania ekranu CloudApp, aby stworzyć kolekcję filmów, które zapoznały ludzi z Amplitude i nauczyły ich podstaw. Te filmy oferowały ciągłe możliwości szkolenia, a ludzie zaczęli odkrywać na własną rękę i uczyć się organicznie. Niektóre platformy wymagają stopnia naukowego w zakresie danych, aby zacząć, ale Amplitude jest intuicyjna i łatwa do nauczenia.

Produkt CloudApp 1CloudApp produkt 2

Wielofunkcyjne przypadki użycia prowadzą do poszerzenia wiedzy

Obecnie wszystkie nasze zespoły korzystają z Amplitude i stała się naszą najważniejszą platformą analityczną. Nasz zespół wykonawczy używa go do śledzenia wskaźników wysokiego poziomu. Używam go do śledzenia eksperymentów, jednocześnie sprawdzając, czy te zmiany wpływają na inne części produktu. Marketing analizuje wzrost na szczycie ścieżki, atrybucję rejestracji i persony tych, którzy dokonali konwersji, aby określić, jak najlepiej podwoić te obszary pozyskiwania. Nasz zespół sprzedaży zagłębia się w indywidualne konta, aby sprawdzić, w jaki sposób te konta wykorzystują funkcje CloudApp i gdzie można zwiększyć wartość naszych klientów. W międzyczasie nasz zespół ds. sukcesu klienta wykorzystuje Amplitudę do identyfikowania potencjalnych problemów i błędów, które zmniejszają wygodę użytkownika. Nasz zespół inżynierów śledzi również wskaźniki stabilności i błędów za pomocą amplitudy, zwłaszcza gdy wydajemy nowe funkcje.

Amplituda pomaga każdemu obiektywnie zrozumieć, gdzie jesteśmy silni, a gdzie słabi. Możemy zidentyfikować obszary o największym wpływie i śledzić te wpływy. Jedną z największych zalet Amplitude jest łatwość udostępniania. Jeśli chcę udostępnić utworzony przeze mnie wykres, mogę skopiować link do tego wykresu i wkleić go do Slacka, aby inni mogli go zobaczyć. Zwykle tworzę krótkie wideo CloudApp wyjaśniające, co widzę, które wysyłam wraz z wykresem, aby dodać więcej kontekstu i przejrzystości. Następnie możemy przeprowadzić szerszą dyskusję o tym, co oznaczają te liczby i dokąd zmierzamy. Amplituda pomaga każdemu zobaczyć dane dla siebie, znaleźć się na tej samej stronie i rozpocząć pracę nad lepszą rzeczywistością.

Przyjęcie metody naukowej w celu ulepszenia naszego produktu

Oprócz ułatwienia współpracy, Amplitude pomogła nam osiągnąć ogólne cele biznesowe. Poprawiliśmy retencję od czasu przyjęcia Amplitudy, dostosowując nasz proces aktywacji.

W naszym poprzednim przepływie użytkownicy rejestrowali się, wybierali plan, podawali informacje o sobie i na koniec pobierali aplikację. Dopiero wtedy mogli zacząć korzystać z produktu i zobaczyć jego wartość. Stworzyliśmy ten przepływ, ponieważ widzieliśmy coś podobnego w innych firmach i po prostu poszliśmy w ich ślady. Ale Amplitude pokazała nam, że ten przepływ nie angażował użytkowników tak bardzo, jak byśmy chcieli. W rzeczywistości przeszkadzało to użytkownikom w aktywacji kont. W rezultacie znacznie skróciliśmy proces onboardingu, całkowicie usuwając plany i krok cenowy. Użytkownicy mogą teraz wejść do aplikacji, wypróbować ją i zobaczyć z góry jej wartość. Ta zmiana poprawiła nasze współczynniki konwersji, a nasz współczynnik utrzymania wzrósł o 51%.

W innym eksperymencie wykorzystaliśmy wykresy wpływu Amplitudy, aby sprawdzić, jak zaangażowanie w daną funkcję wpływa na inne funkcje. Rozumiejąc zachowania użytkowników, możemy na nie wpływać i zachęcać ich do odkrywania szerszego zestawu funkcji.

Amplituda pomaga nam zastosować metodę naukową do adopcji użytkownika: tworzenie hipotezy, testowanie tej hipotezy, analizowanie wyników i iterowanie.

Pomogło nam również zastosować metodę naukową w naszej pracy: tworzenie hipotezy, testowanie tej hipotezy poprzez eksperymenty, analizowanie wyników i iterację. Uczymy się z każdego eksperymentu i budujemy na tym, czego się nauczyliśmy, aby rozpocząć cykl od nowa.

Mamy witrynę marketingową, witrynę produktową i klientów na różnych platformach. Zbieramy dane z tych różnych źródeł i łączymy je w Amplituda. W moich dążeniach do wpływania na przychody z samoobsługi używam Amplitudy do śledzenia wskaźników, takich jak współczynnik konwersji i dalsze skutki wszelkich zmian. Nie chcemy teraz konwertować małej grupy użytkowników, wprowadzając zmianę, która później odstraszy wielu klientów. Amplituda pomaga nam zrównoważyć te wskaźniki biznesowe na jednym pulpicie nawigacyjnym i ustalić priorytety na podstawie tego, co widzimy.

Znalezienie jednego źródła prawdy

Gdybyśmy nie mieli Amplitude, prawdopodobnie musielibyśmy znaleźć samodzielny produkt przeznaczony do eksperymentów niezależnie od platformy analitycznej klienta. Mimo to proces test-uczenia się-iterowania byłby niespójny bez możliwości przeglądania wyników testów w szerszym kontekście. Dzięki Amplitudzie unikamy marnowania czasu na podążanie niewłaściwą ścieżką. Podejmujemy lepsze, bardziej oparte na danych decyzje dotyczące zespołu produktowego, zwłaszcza podczas tworzenia nowych doświadczeń.

Amplituda stała się jedynym źródłem prawdy w CloudApp. Kiedy możesz zidentyfikować najbardziej angażujące punkty styku i obszary wymagające poprawy, możesz zapewnić klientom najwyższy zwrot z każdej zainwestowanej złotówki. Dane mogą zmienić sposób, w jaki pracujesz. Amplituda dała nam możliwość wykorzystania tych danych w całej organizacji i pójścia naprzód.


Dowiedz się więcej o analityce amplitudy i produktu, pobierając naszą bezpłatną książkę Dummies Book już dziś!

Analiza produktów dla manekinów