Nivel 5 · Escribe la conclusión

Las tres partes de una conclusión

La persona que lee tu informe no leerá tu código. Lee un párrafo y decide. Un párrafo sobre el que se puede actuar tiene tres partes:

• Qué: el resultado principal en palabras sencillas. “El banner no mostró ningún efecto medible en la conversión.”
• Cuánto: el número que lo respalda, calculado, no estimado a ojo. Ambas tasas, el tamaño de la muestra, el intervalo, el valor p.
• Y entonces qué: lo que significa para la decisión. “No lo lanzaremos; si el envío gratis importa, repetimos la prueba con más tráfico.”

Sin cuánto es una opinión. Sin y entonces qué es un pie de foto.

Cada número sale del código

Escribe el párrafo después de los números, a partir de los números. Pon la celda que los calcula justo encima del texto, para que cualquiera pueda volver a ejecutarla y obtener las mismas cifras:

rate_a, rate_b = a["converted"].mean(), b["converted"].mean()
print(f"{rate_a:.2%} vs {rate_b:.2%}, diff {rate_b - rate_a:+.2%}, "
      f"95% CI {low:+.2%} to {high:+.2%}, p = {p:.2f}")

Las cifras redondeadas del texto (“4.03% frente a 3.76%”) deben coincidir exactamente con lo que se imprime. Un número escrito de memoria es el que termina mal en la presentación.

Palabras que coinciden con la evidencia

La redacción pesa tanto como los números:

• Una diferencia con p = 0.62 es “ningún efecto medible”, no “el banner funcionó” ni “el banner no hace nada”. La prueba fue demasiado pequeña para ver un efecto menor que cerca del 40%.
• Una correlación está “asociada con”, nunca “causa” (capítulo 4). Solo una prueba aleatorizada como esta puede respaldar una afirmación causal, y solo cuando el resultado es claro.
• Di lo que la prueba no pudo mostrar. Esa sola frase evita que la próxima reunión repita la misma discusión.

Decisiones y recomendaciones

Cuando tomaste una decisión durante el análisis, anótala en tres partes: qué decidiste, por qué y qué cambia. “No excluimos nada: ambos grupos tenían exactamente 2,604 sesiones, así que la división estaba limpia.”

Una recomendación es un verbo de acción, un lugar concreto y el número que la respalda: “Repetir la prueba del banner en primavera con unas 50,000 sesiones por grupo, suficiente para detectar un aumento del 10%.” Compáralo con “considerar probar más”, que nadie puede programar.

Errores comunes

• Celebrar una diferencia no significativa. +7.1% suena a noticia; con p = 0.62 es del tamaño del ruido.
• Convertir “no significativo” en “demostrado inútil”. La ausencia de evidencia de una prueba pequeña no es evidencia de ausencia.
• Describir el gráfico en lugar de concluir. “B es un poco más alto” deja al lector el trabajo de hacer el análisis.
• Generalizar más allá de la prueba. Un banner, en un sitio, en una temporada, dice poco de todas las campañas de envío gratis.