Cómo mido la precisión de una plataforma de catálogos
· Por Jaime Orozco
La precisión se mide celda a celda contra la matriz que una persona ya aprobó. Cómo funciona la prueba, qué cuenta como error y por qué reporto el peor caso.
La precisión de la plataforma de catálogos se mide celda a celda contra la matriz que una persona ya aprobó. Si el motor escribe lo mismo que escribió la persona, la celda cuenta; si no, no cuenta. En la última corrida de la prueba (3 de octubre de 2026), el peor caso fue 94,8 % sobre 12 campañas y 837 productos.
El problema
Convertir los datos de productos que manda el cliente en el documento listo para diseño tomaba unas 2 horas por catálogo. La plataforma lo hace en minutos, pero solo sirve si el resultado se puede confiar sin revisar cada celda.
Cómo se mide
- Se toma una campaña que ya fue aprobada por una persona.
- Se corre el motor con los mismos datos de entrada.
- Se compara cada celda con la matriz aprobada, con una comparación flexible: sin tildes y sin saltos de línea.
- Se repite con todas las campañas en una prueba de regresión que corre cada vez que cambia una regla.
Qué cuenta como error y qué no
Algunas celdas las llena el equipo a mano con un marcador, porque no hay dato que acertar. Esas se reportan aparte: con ellas, una campaña puede dar 93,8 % y sin ellas 96,6 %. Mostrar las dos cifras evita que el número se vea mejor de lo que es.
Por qué reporto el peor caso y no el promedio
Un promedio esconde la campaña que falla. Por eso la cifra que uso en público es el piso: la peor campaña de la suite. Hubo un momento en que una campaña estaba en 86 % y la afirmación pública tuvo que corregirse a un rango de 86 % a 99,8 %. Cuando se mejoraron las reglas de esa campaña, el piso subió y se volvió a poder decir 94 % o más.
Lo que esta medición no dice
- Mide contra matrices que una persona aprobó, no contra una verdad absoluta: la persona también puede equivocarse.
- Las pantallas del portafolio usan datos de demostración, no datos del cliente.
- La cifra cambia cada vez que se agrega una campaña o se cambia una regla, así que va con su fecha.
Ver el caso: Plataforma de Catálogos