Yeni Kılavuzumuzla Ürün Kılavuzluğunda Denemenin Gücünü Açığa Çıkarın

Yayınlanan: 2023-05-04

Günümüzün rekabetçi ortamında, ürün odaklı deneyler iyi bir fikir olmaktan öte, ürün ve mühendislik ekiplerinin etkilerini ölçmek için bir gerekliliktir.Ancak ekiplerin bir deney kültürü geliştirmesi ve bunu güvenle inşa etmek için ürün geliştirme sürecinin her aşamasına aşılaması gerekir.

Alandaki uzmanların içgörülerini ve tavsiyelerini içeren, ürün liderliğindeki deneylere yönelik kapsamlı bir kılavuz oluşturmak için Reforge ile birlikte çalıştık. Kılavuz, ürün ve mühendislik ekiplerinin deneme programları oluşturmasına ve ürünlerinin tüm potansiyelini ortaya çıkarmasına yardımcı olacaktır. Bu gönderide, size kılavuzda neler bekleyebileceğinize dair bir genel bakış sunacağız.

Bir deney kültürü oluşturmayı, deney yapma pratiğini anlamayı, deney yol haritanıza öncelik vermeyi ve daha fazlasını öğrenmek içinkılavuzun tamamını indirin - Güvenle İnşa Edin: Ürün Öncülüğünde Deneyleri Ölçeklendirme Rehberiniz .

Anahtar çıkarımlar

  • Deneme, ürün ekiplerinin çalışmalarının etkisini ölçmelerine, ürün stratejilerini netleştirmelerine ve ürün yatırımlarının risklerini azaltmalarına yardımcı olmak için bir gerekliliktir.
  • Deneme, aynı zamanda ürün liderlerinin çalışmalarını artan para kazanma fırsatları veya müşteriyi elde tutma gibi daha geniş şirket hedeflerine bağlamasına yardımcı olur.
  • Bir deney yapma kültürü oluşturmak, yalnızca hızlı sevkıyatı değil, öğrenme hızınızı desteklemek için temel bir zihniyet değişikliğinin yanı sıra somut sistemler ve süreçleri de içerir.
  • Deneme yolculuğunuza başlamak için, ölçeği tüm kuruluşa yaymadan önce bir ekiple küçük başlayın.
  • Departmanlar arasında açık iletişim ve işbirliği için kanallar oluşturmaya yardımcı olan ve kaynak sağlayabilen bir üst düzey yöneticiyi güvence altına alın.
  • Ürün liderliğindeki deneme kılavuzundan ilk deneme programlarınızı ayarlama hakkında daha fazla bilgi edinin.

Deneme neden önemlidir?

Günümüzün rekabetçi ortamında, ürün ekipleri için deney yapmak isteğe bağlı değildir. Ekiplerin başarılı, yenilikçi ürünler oluşturmasına ve çalışmalarını daha geniş bir organizasyona bağlamasına yardımcı olan şey budur.

Reforge'da Rezidans Yöneticisi Saleem Malkana, denemenin ürün ekiplerinin çalışmalarının etkisini ölçmesine ve ürün stratejisini geliştirmesine yardımcı olduğunu açıklıyor. "En iyi ürün ekipleri, asıl önemli olanın yalnızca bu çıktıları göndermek değil, daha çok hangi sonuçları sağladıklarını bilirler," diye açıklıyor.

Ürün değişikliklerinin etkisini ölçmek için ekiplerin hipotezler geliştirmesi, deneyler yapması ve sonuçları değerlendirmesi gerekir. Gelecekteki ürün stratejilerini bilgilendirmek için deneylerin sonuçlarını kullanabilirler.

Test, aynı zamanda ürün değişikliklerinin riskini azaltmanın bir yoludur. Ürün ekipleri, bir ürün kararının tüm kullanıcılara sunulmadan önce sahip olacağı etkiyi değerlendirebilir; bu da pahalı hatalara yol açabilir.

Genlik Deneyi Ürün Başkanı Wil Pong, ürün liderliğindeki deneyin, WYSIWYG yaklaşımları gibi daha fazla yüzey düzeyinde araç kullanarak mühendisliğin geliştirme döngülerini bozmadan daha hızlı inovasyon sağladığını savunuyor.

Geçmişte, yalnızca Netflix gibi büyük şirketler özel deneyimler sunabilir ve farklı ürün arayüzleri veya öneri motorları ile deneyler yapabilirdi. Şimdi, Amplitude Deneyi gibi yeni uygulamalarla, her büyüklükteki kuruluş, kullanıcıların ihtiyaçlarına göre ürünlerini gerçek zamanlı olarak yineleyebilir ve geliştirebilir.

Ürün liderliğindeki deneme, ürün ekiplerinin, deneyimleri açıp kapatmak için tam kontrole sahip olmalarını sağlayan özellik işaretlerini kullanarak tüm ürünlerinde yüksek oranda hedeflenmiş deneyler gerçekleştirmelerini sağlar. Bu, ekiplerin "ürün geliştirmelerinin geri kalanına güç veren aynı süreçleri ve teknolojiyi kullanarak son derece hedeflenmiş deneyler ve özellik yayınları sunmalarına" olanak tanır, bu da teknik ekipleri kesintiye uğratmadan en nihayetinde hızlı inovasyonu destekleyecektir, diye açıklıyor Wil.

Hesap verme sorumluluğundaki son değişiklikler göz önüne alındığında, ürün liderleri için deney yapmak da çok önemlidir. CAUSL'nin kurucusu ve Genel Müdürü Bhavik Patel, kuruluşların çıktıya dayalı yaklaşımlardan sonuca dayalı yaklaşımlara geçtiğini ve ürün liderlerini daha fazla incelemeye aldıklarını açıklıyor. Ürün ekiplerinin yatırım getirisini ölçmek zor olsa da (kuruluşlar genellikle personel sayısını veya mühendislik saatlerini kullanır), deney yoluyla ürün etkisinin izlenmesi, ürün ekibinin çalışmalarını daha geniş şirket hedeflerine bağlamasına yardımcı olur.

Reforge'unDeneyleme + Test Etme kursu ile stratejik bir deney sisteminin nasıl oluşturulacağını ve uygulanacağını öğrenin.

Bir deney kültürü oluşturmak ne demektir?

Bir deney kültürü, bir organizasyonun tüm bölümlerini içermelidir. Bu kültürü oluşturmak için kuruluşların bir zihniyet değişiminden geçmesi ve yalnızca hızlı nakliye değil, öğrenme hızlarını desteklemek için somut sistemler ve süreçler oluşturması gerekir.

Saleem, bir deney kültürünün tamamen teknik olmadığını açıklıyor. Bu, aşağıdakilerin bir kombinasyonudur:

  • Kişiler: Ekip üyeleri veri odaklıdır.
  • Entegre süreçler ve iletişim: Deneme, ekipler arasında sağlıklı iletişim ile ürün geliştirme süreçlerinin bir parçasıdır.
  • Teknoloji: Kuruluş, denemeye olanak sağlayan bir platform kullanır.

İdeal olarak, manga düzeyine odaklanarak organizasyonun her düzeyinde deneyler olacaktır; çeviklik ve uyarlanabilirliğin temelini oluşturan şey budur. Testler ayrıca günlük operasyonların bir parçası olmalıdır, böylece ekipler ürünü geliştirmek için kullanabilecekleri sürekli bir içgörü akışı elde eder.

Bir deney kültürü yaratmak için ekipler, merakı ve "başarısızlığı" kucaklayan bir zihniyet geliştirmelidir, çünkü her ikisi de öğrenme mekanizmalarıdır. Deneyler etrafında ivme yaratmak için, bir yönetici şampiyonu elde etmek de önemlidir.

Deney yapmayı benimseyen bir yönetici, zaman, bütçe ve araçlar gibi kaynakların sağlanmasına yardımcı olacaktır. Ayrıca departmanlar arasında açık iletişim ve işbirliği için kanallar oluşturmaya da yardımcı olacaklar.

Tam kılavuzda daha fazlasını okuyun.

Deney yolculuğunuza nasıl başlanır?

Bir kuruluşta deneme programlarının uygulanması zaman alır. Başladığınız zaman için en iyi uygulamalardan bazılarını burada bulabilirsiniz.

Küçük başlayın ve büyütün

Nihai hedef, deneyleri bir kuruluş genelinde yaygınlaştırmaktır. Ancak kuruluşlar, ölçeklendirmeden önce bir ekip genelinde düşük riskli testlerle küçük başlamalıdır.

Saleem tek bir "mükemmeliyet merkezi" kurulmasını öneriyor: Temel deney yığınını doğrulaması ve oradan geliştirmesi gereken tek bir ekip. Büyüme Danışmanı ve Geçici Büyüme Yöneticisi Elena Verna, "tek bir ekibin önce nasıl test edileceğini, nasıl öğrenileceğini ve nasıl kazanılacağını öğrenmesi gerekir" diye açıklıyor.

Devam ediyor: "Bu ekip, deney becerilerini ve zihniyetini geliştirdikten sonra, test etme ve öğrenmeye erişimi demokratikleştirmeye çalışmalıdır. Bu şekilde, tüm organizasyon deneyerek nasıl kazanılacağını öğrenebilir." Sonuç olarak, tüm departmanlardaki ekip üyeleri, günlük kararlarını bildirmek için testler yürütebilmelidir.

Bhavik, ekiplerin düşük riskli testlerle başlamalarını öneriyor: "Örneğin, karmaşık bir fiyatlandırma deneyiyle başlamanızı tavsiye etmem, ancak bu, üzerinde çalışılması gereken harika bir hedef."

Ayrıca gerçekçi olmayan sayılara takılmamak konusunda da uyarıyor. Şirketlerin çoğu binlerce deney yapmaya çalışmamalıdır. Bunun yerine, "hedef, geçen çeyrekte veya yılda yaptıklarından daha fazla [test] yapmak olmalıdır" diyor.

Fikir üretin, onaylayın, önceliklendirin

Gereksiz deneyler yapmak kaynakları boşa harcar, bu nedenle ekiplerin hangi deneyleri çalıştıracaklarını seçme konusunda seçici olmaları gerekir.

Fikrinizi bir metrik ağaç (bir ürün merdiveninin tüm öğelerinin şirket hedeflerine nasıl ulaştığını gösteren bir diyagram) veya bir güneş diyagramı (kuruluşunuzun iş akışlarına genel bir bakış) ile başlatın. Bu diyagramları incelemek, size deneme çabalarınızı nereye odaklayacağınız konusunda bir fikir verir.

Fikirleri test etmek için önce hangi fikirlerin peşine düşmeye değer olduğunu belirlemek için test kavramlarını doğrulayın. Doğrulamak için boyalı kapı testleri, masa başı araştırmaları kullanabilir veya benzer deneylerin sonuçlarını inceleyebilirsiniz.

Ardından, her potansiyel testten içgörü elde etme süresini değerlendirin. Elena, ekiplerin öğrenme hızına öncelik vermesi ve bir deneyi yalnızca çalıştırmanındeğil, oluşturmanın da ne kadar süreceğini düşünmesi gerektiğini vurguluyor. Saleem ayrıca daha hızlı bir geri bildirim döngüsü elde etmek için büyük zorlukları daha küçük test edilebilir hipotezlere bölmeyi öneriyor.

Dikkate alınması gereken diğer faktörler şunlardır:

  • Testleri çalıştırmak için yeterli trafiğe ihtiyacınız olduğundan, ürününüzün farklı noktalarındaki hacim
  • Çalıştırmak istediğiniz testin sahip olduğunuz analiz araçlarıyla ölçülüp ölçülemeyeceği

Test fikirlerinizi doğruladıktan sonra, aşağıdakilere göre hangi deneylerin çalıştırılacağına öncelik verin:

  • Test etme kapasiteniz
  • Testin ne kadar etkisi olmasını bekliyorsunuz?
  • İstenen etkiyi yaratacağından ne kadar eminsiniz?
  • Testi yürütmek için harcanan çaba

En iyi uygulamaları kullanarak deneylerinizi tasarlayın

Bhavik, iyi tasarlanmış deneylerin bilimsel yönteme dayandığını açıklıyor. Bunlar şu aşamalara ayrılabilir: deneyden önce planlama, deney sırasında izleme ve deneyden sonra analiz etme.

Deney fikirlerinizi doğruladıktan ve hangi testlere öncelik vereceğinizi seçtikten sonra, deneylerinizi planlamanız gerekir. Deneyi yürütme nedenlerini belgeleyin. Neyin test edildiğini ve değiştirildiğini açıkça ifade edin; bu bir tasarım değişikliği veya yeni bir özellik ya da deneyim olabilir.

Bir hipotez oluşturun ve denemeniz için açıkça tanımlanmış ürün metrikleri veya KPI'lar belirleyin. Olası sonuçlara göre sonraki adımlara karar verin. Her değişken kazandığında veya test istatistiksel olarak anlamlı değilse ne olacağını belirleyin.

Eksiksiz kılavuzda deney öncesi planlamayı daha derinlemesine inceleyin.

Deney sırasında, testi sürekli olarak izlemek için bir analiz panosu oluşturun. Deneyden sonra, sonuçları analiz edin ve sonucu ifade edin. Ardından, ekip önceden belirlenmiş sonraki adımlarla ilerleyebilir.

Güvenle inşa edin

Başarılı deneme programlarının nasıl çalıştırılacağı konusunda daha fazla rehberlik için ürün liderliğindeki deneme kılavuzunu indirin.

Kılavuzda ayrıca şunların nasıl yapıldığını da öğreneceksiniz:

  • Chad Sanderson'dan bir çerçeve kullanarak deneme platformunuzu oluşturmaya veya satın almaya karar verin
  • Testlerinizi ölçün ve değerlendirin
  • Ürün liderliğindeki deneyleri ölçeklendirmek için hangi kritik yeteneklere ihtiyacınız var?
  • Genişlik Deneyi geniş ölçekte deney sunmak için nasıl kullanılır?

Rehberi bugün edinin.