Priorizador de experimentos A/B: PIE / ICE

El cuello de botella de un programa de tests casi nunca es la falta de ideas, es el orden en que las corres. Con tráfico limitado, cada semana gastada en un experimento débil es una semana que el fuerte no corrió. Priorizar por opinión hace que el test lo gane quien grita más fuerte en la reunión. El PIE y el ICE cambian la discusión por un número: puntúas cada idea en tres dimensiones y dejas que el promedio ordene la fila. Esta herramienta hace la cuenta en vivo y devuelve el ranking con un clic.

Cómo usarla

1. Elige el framework: PIE si priorizas páginas y áreas por retorno potencial, ICE si priorizas ideas sueltas y quieres premiar las de evidencia más fuerte.
2. Lista los experimentos, uno por fila. Describe el cambio concreto, no el objetivo: "prueba social sobre la línea de flotación", no "aumentar la confianza".
3. Da una nota de 1 a 10 en cada una de las tres dimensiones. Sé honesto con la facilidad: un test que depende de dev por tres sprints no es fácil.
4. Lee el score y la posición, que se actualizan con cada nota. Usa "Ordenar por score" para ver la fila en orden del ranking.
5. Haz clic en Descargar CSV para llevar el ranking priorizado a tu backlog en Sheets, Notion o Trello.

Cómo funciona: la fórmula del PIE y del ICE

En los dos frameworks, cada dimensión recibe una nota de 1 a 10 y el score es el promedio simple de las tres:

Las tres dimensiones son siempre "mientras más alto, mejor", incluida la facilidad: más fácil de implementar vale una nota más alta, porque libera tráfico más rápido para el próximo test. Por eso el promedio directo ya sirve de ranking, sin invertir ningún eje. El Potencial (o Impacto) es cuánto puede mejorar la página; la Importancia del PIE es el valor del tráfico que pasa por ahí; la Confianza del ICE es la fuerza de la evidencia detrás de la apuesta.

Ejemplo trabajado (reproduce el resultado por defecto)

Con los tres experimentos que ya vienen cargados, en el framework PIE: "prueba social sobre la línea de flotación en la home" recibe Potencial 8, Importancia 9 y Facilidad 6. El score es (8 + 9 + 6) / 3 = 23 / 3 = 7,67. "Simplificar el formulario de checkout" recibe 9, 8 y 4, entonces (9 + 8 + 4) / 3 = 21 / 3 = 7,00. "Cambiar el texto del botón del CTA principal" recibe 5, 6 y 9, entonces (5 + 6 + 9) / 3 = 20 / 3 = 6,67.

El ranking sale como 1º la prueba social (7,67), 2º el checkout (7,00) y 3º el botón (6,67), exactamente como la herramienta muestra arriba cuando abres la página. Fíjate en lo que el score captura: el botón es el más fácil de todos (9 en facilidad), pero aun así queda en último lugar, porque su potencial y su importancia son menores. Es la lección central de la priorización, empieza por lo que mueve la aguja, no por lo que es cómodo de hacer.

Cómo interpretarla y dónde engaña

El score es una regla de comparación relativa, no una nota absoluta. Un 7,67 solo quiere decir "mejor que el 7,00 de la misma lista", no "va a rendir 7,67". Sirve para ordenar la fila, y eso es lo que resuelve el problema real: dejar de correr el test fácil antes del test importante. Compara siempre dentro de la misma ronda y con el mismo framework, porque mezclar notas de PIE e ICE en la misma lista no tiene sentido, las dimensiones miden cosas distintas.

El límite honesto es la subjetividad de las notas. Dos analistas dan facilidades distintas al mismo test, y la nota de confianza del ICE es donde el sesgo más se esconde: es fácil dar un 9 a la idea que ya querías correr. Dos defensas simples: puntúa en grupo, no solo, y ancla la confianza en evidencia real, no en el entusiasmo. Si tu confianza viene de un dato cuantitativo, merece una nota alta; si viene de una corazonada, sé duro. El generador de hipótesis ayuda a transformar la idea priorizada en una apuesta falsable antes de encender el test.

Buenas prácticas al priorizar

• Fija una escala común antes de puntuar. Acuerden qué es "facilidad 3" y qué es "facilidad 9" para que la nota signifique lo mismo en toda la lista.
• Puntúa en pareja o trío. El promedio de dos lecturas corta el sesgo individual mejor que cualquier regla.
• Revalúa la fila después de cada test terminado. Un resultado sorpresa cambia la confianza de las ideas vecinas y reordena el backlog.
• No persigas el tercer decimal. Una diferencia de 0,1 entre dos ideas es ruido; corre cualquiera de las dos primero y sigue.

Preguntas frecuentes

¿Qué es la priorización PIE e ICE?

Son dos frameworks para decidir qué experimento correr primero. El PIE (Potential, Importance, Ease) viene de WiderFunnel y puntúa el potencial de mejora de la página, la importancia del tráfico que recibe y la facilidad de implementar. El ICE (Impact, Confidence, Ease) viene del growth de Sean Ellis y puntúa el impacto esperado, tu confianza de que va a funcionar y la facilidad. En ambos das una nota de 1 a 10 en cada dimensión y el score es el promedio.

¿Cuál es la diferencia entre PIE e ICE?

La diferencia está en la letra del medio. El PIE pregunta "qué tan importante es esta página" (el volumen y el valor del tráfico que pasa por ahí), mientras el ICE pregunta "qué tan confiado estás" (la fuerza de la evidencia detrás de la apuesta). Usa PIE cuando priorizas páginas o áreas por retorno potencial; usa ICE cuando priorizas ideas sueltas y quieres premiar las de evidencia más fuerte. Potential/Impact y Ease existen en los dos.

¿Cómo se calcula el score?

Es el promedio simple de las tres notas: score = (nota1 + nota2 + nota3) / 3. Las tres dimensiones son "mientras más alto, mejor", incluida la facilidad (más fácil es mejor), así que el promedio directo ya ordena. Un experimento con 8, 9 y 6 da (8 + 9 + 6) / 3 = 7,67. El resultado queda en la misma escala de 1 a 10, lo que facilita comparar la lista entera de un vistazo.

¿Debo multiplicar en vez de promediar en ICE?

Algunos equipos multiplican las tres notas del ICE en lugar de promediar, lo que dispersa más los scores (va de 1 a 1000) y castiga con más fuerza una dimensión débil. En la práctica ambas formas ordenan parecido. Esta herramienta promedia en los dos frameworks porque es la forma original documentada del PIE y la más legible: el score queda en la misma escala de las notas, así que un 7 significa lo mismo en cualquier lugar.

¿La nota más alta garantiza que el test va a ganar?

No. El score mide prioridad, no resultado. Te dice dónde conviene gastar el próximo ciclo de tráfico, según lo que sabes hoy. Muchas ideas bien puntuadas pierden, y es normal: priorizar es sobre dónde apostar, no sobre garantía de retorno. La confianza del ICE ayuda a calibrar eso, pero ningún framework reemplaza correr el test y leer la significancia al final.

¿Cómo exporto el ranking?

Haz clic en Descargar CSV: la herramienta genera el archivo ya ordenado por score, con posición, nombre, las tres notas y el score final, y la descarga ocurre en tu navegador, sin enviar nada a ningún servidor. El archivo abre directo en Excel, Google Sheets o Notion, listo para volverse el backlog priorizado de tu programa de tests.

Sigue

¿Priorizaste la fila? Toma la idea del tope y escribe la apuesta en el generador de hipótesis de test A/B, dimensiona el experimento en la calculadora de tamaño de muestra y, cuando el test termine, lee el veredicto en la calculadora de significancia.