Mind BarracksPower-ups

← Todos los challenges

Challenge 07Entrepreneurial Mind · ¿Dónde está la oportunidad?

El test ganó, ¿lo lanzamos?

El test dio positivo y todos ya asumieron que se lanza. Si digo que no, tengo que tener una razón muy buena, y todavía no sé si la tengo.

Te asignaron un ticket

StoryPROD-4821In Progress

Rollout variante B a 100% de usuarios

Cerramos el test de la nueva pantalla de pago. Salió positivo. Necesito que confirmes y armamos el rollout esta semana. ¿Vamos al 100%?

User story

Como PM de Checkout, quiero lanzar la variante B de la pantalla de pago al 100% de los usuarios, para subir la conversión del pago.

Criterios de aceptación

  • Cumplido: El test A/B cerró con un resultado estadísticamente significativo
  • Cumplido: La variante B supera a la A en conversión total
  • Pendiente: Análisis confirma el resultado antes del deploy
  • Pendiente: Feature flag de B al 100% y variante A apagada
Reporta
Valentina Rojas
Asignado a
Prioridad
High
Creado
hace 2 horas
Sprint
Sprint 34 - Checkout
  • checkout
  • experimento
  • rollout

Comentarios

  1. Valentina Rojas · PM hace 2 horas

    Contexto para quien lo tome: B es el pago en un solo paso, más limpio. La validamos en entrevistas con gente que compraba por primera vez y la encontraron mucho más clara. El export del test está adjunto.

  2. Martín Soto · Diseño hace 1 hora

    Los assets finales de B ya están en Figma, versión 3. Si hay cambios de copy avísenme antes del jueves.

Lo que te mandaron

La lámina que te pasaron. Los datos completos están más abajo.

  • Variante A
  • Variante B
Conversión acumulada por variante% de usuarios que convirtieron, acumulado desde el primer día del test
9,4 %9,6 %9,8 %10,0 %6 abr8 abr10 abr12 abr14 abr16 abr18 abr20 abr22 abr24 abr26 abr
Ver los datos
Variante AVariante B
6 abr9,74 %9,61 %
8 abr9,50 %9,79 %
10 abr9,58 %9,79 %
12 abr9,59 %9,81 %
14 abr9,61 %9,80 %
16 abr9,54 %9,86 %
18 abr9,64 %9,81 %
20 abr9,62 %9,79 %
22 abr9,65 %9,76 %
24 abr9,67 %9,78 %
26 abr9,68 %9,79 %

Paquete de intel

challenge-7-abtest.csv84 filas5 columnasCSV

Descargar los datos
ColumnaQué contiene
fechaEl día del test, en formato AAAA-MM-DD. Tres semanas.
varianteA es la pantalla actual, B es la nueva.
segmentoDos valores: nuevo, para quien compra por primera vez, y recurrente.
usuariosUsuarios que vieron esa variante ese día en ese segmento.
conversionesCuántos de ellos completaron la compra.

Objetivo

Máximo 150 palabras: qué harías con el rollout y por qué. Si tu respuesta no es un simple sí o no, di exactamente cuál es y qué habría que medir después.

Tope duro · 150 palabras

Entregar tu respuesta

Le estás respondiendo a Valentina.

Quién lo revisa

Foto de Rodrigo Urrea
INS-01

Rodrigo Urrea

Analítica · Forecasting · Productos digitales

  • 14 años
  • Chile · Alemania · EE.UU.
  • Varias industrias
  • Forecasting
  • Productos digitales
  • MSc Business Analytics
  • AI-ready

Catorce años en analítica, en Chile, Alemania y para compañías en Estados Unidos.

Empecé en consumo masivo y bebidas, donde los pedidos llegaban con apuro y sin contexto. Después forecasting, productos digitales, y empresas sin equipo de datos que necesitaban una respuesta usable el lunes y no el mejor modelo posible. Un MSc en Business Analytics en el camino. Trabajé en varias industrias, y el patrón se repite en todas: el problema casi nunca es la técnica o la herramienta.

Hoy trabajo en construir capacidades AI-ready para tareas de analítica: qué parte del trabajo conviene automatizar y qué parte sigue siendo criterio. La segunda es más grande de lo que parece.

Los 21 challenges salen de pedidos que me hicieron a mí.

LinkedIn Todos mis enlaces

Power-ups

Que alguien lo mire de verdad

Puedes resolver todos los challenges gratis y nunca pagarme nada. Eso está bien y así está diseñado.

Lo que se paga es una lectura profesional de tu respuesta: qué se sostiene, qué no, y en qué parte el boss te iba a parar. Es el tipo de comentario que en un trabajo real llega tarde, cuando ya te costó algo.

La revisión, punto por punto

tu respuesta01Encargo02Método03Número04Lo no visto05Entrega
  1. 01El encargo real

    ¿Entendiste la pregunta detrás de la pregunta, o respondiste la literal?

  2. 02La decisión de método

    ¿Elegiste lo más simple que servía, y lo justificaste?

  3. 03El número

    ¿Está bien, está acotado, y dice de qué no puede responder?

  4. 04Lo que no viste

    ¿Se te pasó algo que cambia la respuesta?

  5. 05La entrega

    ¿Lo dirías así frente a quien preguntó?

Entrega tres y te leo uno gratis

Si entregas tres challenges cualesquiera con el mismo correo, te doy mi opinión sobre uno, sin cobrarte. No es la revisión completa de cinco puntos: son unas líneas honestas sobre dónde se sostiene tu respuesta y dónde no.

Lo cuento por el correo con el que entregaste, no por el navegador. Si cambiaste de computador en el camino, cuenta igual.

Power-up

Revisión

USD 19

Mandas tu respuesta a cualquier challenge. En 5 días hábiles recibes una revisión escrita con la misma estructura de cinco puntos, y una sola cosa que arreglar.

5 cupos por semana.

Pedir revisión

Power-up

Sesión 1:1

USD 59

45 minutos, en vivo, sobre lo que tú traigas: una respuesta, una entrevista de trabajo, una decisión de carrera, un problema real de tu trabajo.

2 cupos por semana.

Reservar hora
GarantíaSi la revisión no te sirve, me escribes y te devuelvo los USD 19. Sin preguntas y sin formulario.
Se descuentaSi ya pagaste una revisión, los USD 19 se descuentan de la sesión.

Los precios están en dólares porque el cobro pasa por una cuenta en Estados Unidos. Al pagar vas a ver el monto convertido a pesos; tu banco puede sumar su comisión por compra internacional. Si prefieres transferencia en pesos, escríbeme.

Ficha de contexto · Mundo digital

App y producto digital

Todo queda registrado, y el equipo cambia algo todas las semanas.

Cómo gana plata

Una app o un sitio gana cuando la gente completa algo: se registra, compra, paga o vuelve. Cada pantalla es un paso del camino. El equipo lanza versiones, pantallas nuevas y experimentos todo el tiempo, y cada acción del usuario queda guardada como un evento.

Resultado = usuarios que llegan × parte que completa cada paso × valor de lo que completan

Las métricas que más se usan

Conversión
La parte de los usuarios que completa la acción que importa: registrarse, pagar, activar la cuenta.
Usuarios activos (DAU, WAU, MAU)
Cuántos usan el producto en un día, una semana o un mes. Qué cuenta como usar lo define cada empresa.
Retención (D1, D7, D30)
Qué parte de los usuarios vuelve uno, siete o treinta días después de llegar.
Activación
La parte de los usuarios nuevos que llega al primer momento de valor, por ejemplo terminar la configuración inicial.
CTR
Clics sobre veces mostrado: de cada cien veces que aparece un botón, un banner o un resultado, cuántas reciben un clic.
Adopción de versiones
Qué parte de la base ya tiene instalada una versión. Decide hasta cuándo hay que seguir dando soporte a las anteriores.
Tasa de errores
Las fallas que registra el sistema, por cada mil sesiones o eventos.

Su ritmo

Tiene ciclos semanales, días hábiles contra fin de semana, y saltos con cada lanzamiento o campaña. Los cambios se lanzan de a poco, a una parte de los usuarios primero.

Quién pide y qué le preocupa

Producto
Lanzar rápido y poder mostrar que lo lanzado funcionó.
Ingeniería
Qué se rompió, dónde, y cuánto cuesta mantener lo antiguo.
Marketing
Que la campaña se note en el número que se presenta en el comité.

Glosario

Test A/B
Mostrar dos versiones a grupos elegidos al azar y comparar cómo les va.
Rollout
Lanzar un cambio de forma gradual, partiendo por una parte de los usuarios.
Evento
Cada acción que queda registrada: abrir, tocar, pagar, fallar.
Embudo
Los pasos de un proceso en orden, con cuántos usuarios llegan a cada uno.
Deprecación
Dejar de dar soporte a una versión antigua.

Ver esta ficha con sus challengesTodas las fichas

Buffs