Se lanza un rediseño, la tasa de finalización sube y el equipo quiere saber si su trabajo ha servido de algo. Responder a esa pregunta es mucho más difícil si nadie registró cómo se medía esa tasa antes del lanzamiento. Incluso recordar una cifra sirve de poco si se han perdido el denominador, el periodo de tiempo y la definición de lo que era el éxito.
Una medición de referencia (o baseline) registra el punto de partida con el que se compararán los resultados posteriores. Puede ser un test de usabilidad del producto actual, varias semanas de datos de comportamiento o la primera oleada de una encuesta periódica. Su valor está en hacer que la comparación sea posible e interpretable, y no solo en aportar un número con la etiqueta «antes».
Registra tanto las condiciones como el resultado
En un estudio ficticio sobre facturas, un equipo registra si los participantes pueden encontrar y descargar la factura correcta sin ayuda. Para repetir esa medición más adelante, quien investigue necesitará la redacción exacta de la tarea, los criterios de selección de los participantes, las condiciones del dispositivo y el criterio para considerar que la tarea se completó con éxito. Un porcentaje sin esos detalles no permite distinguir si el diseño ha mejorado o si la prueba fue simplemente más fácil.
En el caso de una métrica continua de producto, registra la definición del evento, las exclusiones y el periodo analizado. Conserva el tamaño de la muestra y la dispersión de los resultados, no solo la media. La guía de Nielsen Norman Group sobre cómo establecer referencias aborda el papel que juegan tanto la analítica como la investigación a la hora de crear un punto de partida útil.
Un solo estudio puede servir de referencia, pero siempre conlleva cierto margen de incertidumbre. Tomar varias mediciones puede ser muy útil en métricas que fluctúan según el día de la semana, la estacionalidad o los ciclos de lanzamiento. El objetivo es tener suficiente contexto para identificar variaciones normales, sin necesidad de convertir la recopilación de históricos en un trámite obligatorio para cada decisión.
Asegúrate de que la comparación sea justa
Al volver a medir, mantén estables aquellos aspectos del estudio que deban seguir siendo comparables. Cambiar a la vez el público objetivo, la tarea, la pregunta de valoración y el producto deja demasiadas explicaciones abiertas para cualquier diferencia en los datos. Si un cambio inevitable rompe la serie temporal, regístralo y valora tomar mediciones superpuestas para entender su impacto.
Una medición de referencia se suele utilizar como referencia interna. El benchmarking es una práctica de comparación más amplia que también puede incluir a la competencia o datos de referencia externos. Pero ni una media del sector ni los resultados de la competencia pueden suplir una medición que no se hizo en tu propio producto antes del cambio.
Separa la mejora de la atribución
Una diferencia de antes y después demuestra que el resultado medido ha cambiado, pero no prueba que la causa haya sido el rediseño. Puede que una campaña de marketing haya atraído a un público diferente, o que una caída puntual del servicio hiciera que el punto de partida fuera anormalmente malo. Si el punto de partida se eligió justo en un mínimo histórico, la recuperación posterior puede ser, en parte, una simple fluctuación natural.
Contar con un grupo de control simultáneo y adecuado ayuda a despejar estas dudas. Siempre que sea viable, un test A/B mide el cambio frente a una versión que no lo recibió durante el mismo periodo. Si esto no es posible, presenta los datos del antes y el después señalando sus limitaciones y contrasta otras posibles explicaciones usando el registro de lanzamientos, datos de la audiencia y estudios cualitativos.
La conclusión útil puede ser que el nuevo flujo funciona mejor bajo las condiciones evaluadas, aunque la contribución exacta del rediseño no esté del todo clara. Sigue siendo una conclusión valiosa, siempre que el informe no transforme discretamente una simple comparación en una relación de causa y efecto.