Use resúmenes de experimentos para diseñar mejores experimentos

Ya sea que su empresa recién esté comenzando su viaje de experimentación o ya haya establecido una cultura de experimentación, el uso de Experiment Briefs puede ayudar a democratizar la experimentación, diseñar mejores experimentos y crear transparencia sobre los objetivos y los próximos pasos para cada experimento.

Democratizar la experimentación

¿Qué entendemos por democratización? La democratización es el acto de hacer algo accesible para todos. Para democratizar la experimentación, las organizaciones deben hacer accesibles dos cosas:

1. La capacidad de ejecutar experimentos debe ser accesible para cualquier persona en cualquier parte de la organización.
2. Cualquiera debería poder acceder rápidamente a los datos y resultados clave de cada experimento.

Un excelente enfoque para democratizar los hechos clave y los resultados de un experimento es usar un resumen de experimento.

¿Por qué su equipo debería usar un Experiment Brief?

Diseñe mejores experimentos

Ejecutar experimentos es un componente fundamental del método científico, siendo científico la palabra operativa. El diseño de un experimento es una parte crucial del proceso, pero muchos equipos suelen pasar por alto este paso clave del proceso. Exploraremos esto con más profundidad en la siguiente sección.

Integre la transparencia en su proceso

Sin una documentación transparente, es fácil racionalizar las decisiones y encajarlas en una narrativa después de conocer los hechos, lo que conduce a malos resultados en la experimentación. Al documentar claramente los próximos pasos después de que se ejecuta un experimento, es mucho más probable que los equipos avancen en función de lo que aprenden del experimento.

¿Cómo es un buen experimento?

Muchos practicantes asumen que un experimento consiste en comenzar con una idea, construir un prototipo, probarlo y luego averiguar qué hacer a continuación. Equivocado.

Un buen experimento sigue el esqueleto del método científico. Estos conceptos básicos se trasladan al mundo de los experimentos digitales, junto con algunos componentes personalizados. Para que conste, cuando digo “buen experimento”, no me refiero al resultado del experimento. Un "buen experimento" habla de un experimentobien diseñado ".

Estos son los componentes críticos de un buen diseño de experimento:

Planificación (pre-experimento)

1. Documente las observaciones que aclaren por qué planeamos realizar este experimento.
2. Investigación para validar nuestras observaciones. Esta investigación puede ser cuantitativa, cualitativa, insights competitivos, etc.
3. Cree una hipótesis con métricas o KPI claramente definidos
4. Cree una alineación en los próximos pasos de su equipo en función de cada resultado posible: si cada variante gana o si la prueba no alcanza la significación estadística.
5. Las características de la configuración del experimento incluyen la duración, la audiencia, la división del tráfico, el umbral crítico y más
6. Articulación clara de lo que se está probando y modificando. Esto podría ser un cambio de diseño, una nueva función o experiencia, y más
7. Confirme que el experimento se puede medir

Mientras se ejecuta el experimento

1. Tableros de análisis para monitoreo continuo

Post-experimento

1. Analizar los resultados
2. Articule el resultado del experimento y avance con los siguientes pasos predeterminados.

El resumen del experimento

Ahora que entendemos en qué consiste un buen diseño de experimentos, podemos crear plantillas de nuestro proceso para garantizar que toda la información crítica se documente antes de que comience el experimento, siempre.

Esto facilita que cualquier persona en su organización aprenda sobre el experimento de forma asincrónica, lo que ayuda a habilitar la democratización.

Fase 1: Planificación

Fase 2: Configurar

Fase 3: Monitorear

Fase 4: Analizar y Decidir

Pensamientos finales

Estos resúmenes de experimentos se pueden categorizar fácilmente por fecha, segmento, sección del sitio web y plataforma. También deben ser accesibles para todos para que este conocimiento institucional persista incluso si la gente va y viene. El uso de Experiment Briefs puede ayudar a su equipo a mejorar su programa de experimentación al documentar de manera transparente cada experimento para democratizar esta información.

Me encantaría escuchar sus opiniones sobre esta plantilla y cualquier modificación que haría. Puede ponerse en contacto conmigo en LinkedIn o Twitter, o consultar mi blog.

Se puede encontrar un enlace a la plantilla del resumen del experimento siguiendo este enlace → Plantilla del resumen del experimento.