Cuando la
NSM se vuelve
vanity metric.
Una NSM puede deteriorarse hasta medir exactamente lo que intentabas evitar. Los mecanismos, las señales y cómo detectarlo antes de que el negocio lo pague.
El deterioro silencioso de la NSM.
La North Star Metric no se elige una vez para siempre. Es una hipótesis estratégica sobre qué representa el valor central del negocio en su etapa actual — y como toda hipótesis, puede dejar de ser válida. El problema es que el deterioro de la NSM raramente se anuncia: la métrica sigue subiendo, el equipo sigue alineado alrededor de ella, y nadie detecta que lo que se está midiendo ya no es lo que se creía medir.
Este es el riesgo que la Ley de Goodhart captura parcialmente. Goodhart observó que cuando una medida se convierte en objetivo, deja de ser una buena medida — porque el sistema aprende a optimizar el número en lugar de lo que el número representaba. Aplicado a la NSM: en el momento en que el equipo empieza a tomar decisiones para mover la NSM, la NSM empieza a perder su capacidad de representar el valor entregado al cliente de manera neutral.
Pero Goodhart no es el único mecanismo. Una NSM puede deteriorarse sin ninguna intención de gamificarla — simplemente porque el negocio, el mercado o el cliente cambiaron, y la métrica que antes era una señal fiel del valor entregado ahora mide algo diferente. Entender los cuatro mecanismos de deterioro es lo que permite detectar el problema antes de que se vuelva sistémico.
02 — Los 4 mecanismosLos 4 mecanismos de deterioro de la NSM.
Gamificación: el equipo aprende a mover el número sin mover el valor
Es el mecanismo más estudiado y el más difícil de detectar desde adentro. Una vez que la NSM es el objetivo compartido del equipo, cada área desarrolla incentivos para hacerla subir — y eventualmente encuentra maneras de hacerlo que no entregan valor real al cliente. Las notificaciones agresivas que aumentan sesiones sin aumentar satisfacción. Los onboardings simplificados que mejoran la tasa de activación pero reducen la retención posterior. Los incentivos de trial que inflan usuarios activos con usuarios que nunca se convertirán en clientes.
El mix de usuarios cambia y la NSM mide a una población diferente
Si el canal de adquisición que más crece trae un segmento con patrones de uso distintos al segmento para el cual se diseñó la NSM, la misma acción puede tener diferente significado en términos de valor entregado. "Completar el flujo core" en un usuario enterprise que integra el producto con su stack tiene un significado diferente que en un usuario freelance que lo usa una vez por semana. Si el mix de adquisición cambia estructuralmente, la NSM puede seguir subiendo mientras el valor promedio entregado cae.
La NSM pierde varianza y deja de ser diagnóstica
A medida que el equipo optimiza alrededor de la NSM durante meses o años, la distribución de usuarios que cumplen el criterio de la NSM se estrecha. Si casi todos los usuarios activos completan el flujo core, la tasa de activación deja de discriminar entre usuarios que entregan valor y usuarios que no — porque el umbral quedó demasiado bajo para el estadio de madurez del negocio. La NSM sigue siendo verdadera pero dejó de ser sensible a los cambios relevantes.
El negocio cambió y la NSM ya no representa el valor central
Es el mecanismo más legítimo y el que requiere mayor valentía para reconocer. Si el modelo de negocio evolucionó — nuevas líneas de producto, nuevo segmento principal, cambio en la propuesta de valor — la acción del usuario que antes representaba el valor central puede ya no representarlo. Una empresa que arrancó como herramienta de productividad individual y se convirtió en plataforma de colaboración de equipo tiene una NSM diferente en cada etapa, aunque los números de la NSM original sigan subiendo.
Las señales de alerta.
Las siguientes señales no son diagnóstico definitivo — son indicadores que justifican abrir una revisión formal de la NSM. Algunas pueden tener explicaciones alternativas; lo importante es no ignorarlas.
La NSM sube sostenidamente pero el revenue no sigue
La correlación causal que justificó la elección de la NSM dejó de verificarse en los datos. Puede ser un rezago temporal — o puede ser que la NSM ya no predice el crecimiento del negocio.
Los mejores usuarios en la NSM tienen peor retención
Si los usuarios que generan los mejores números en la NSM tienen tasas de churn más altas o NPS más bajos que el promedio, la NSM está midiendo actividad superficial, no valor entregado.
El equipo encontró formas de moverla que "no cuentan"
Si el equipo empieza a distinguir entre movimientos de la NSM que "son reales" y movimientos que "no cuentan realmente", la NSM fue gamificada. Esa distinción informal es el diagnóstico.
Las decisiones importantes no referencian la NSM
Si en las reuniones más importantes del negocio — lanzamiento de producto, expansión de mercado, cambio de pricing — nadie menciona la NSM como criterio, el equipo ya dejó de creer en ella aunque nadie lo haya dicho explícitamente.
La NSM deja de moverse con las intervenciones
Si múltiples iniciativas diseñadas para mover la NSM producen resultados marginales o nulos, puede ser saturación — la NSM alcanzó un techo para este modelo y necesita redefinirse en un umbral más exigente.
El LTV de los usuarios que generan NSM cae consistentemente
Si el valor de vida de los usuarios que "califican" para la NSM cae trimestre a trimestre, la NSM está capturando una población diferente a la que capturaba cuando se eligió — mecanismo de cambio de segmento activo.
El test diagnóstico de la NSM.
Ante la sospecha de deterioro, el siguiente test estructurado permite evaluar si la NSM sigue siendo válida o si corresponde iniciar el proceso de revisión. Las cinco preguntas se aplican con datos reales — no con intuiciones.
Si el test produce dos o más respuestas en la columna "revisar", corresponde iniciar el proceso de revisión formal de la NSM — no esperar a que más señales confirmen el deterioro. El proceso de revisión y transición se cubre en el Spoke 08.
05 — Caso realCaso: la NSM que creció mientras el negocio caía.
Cómo "lecciones completadas" dejó de medir aprendizaje
La NSM original y su lógicaUna plataforma de cursos online eligió "lecciones completadas por usuario activo mensual" como NSM en su etapa de lanzamiento. La lógica era sólida: un usuario que completa lecciones está aprendiendo, y el aprendizaje es el valor central que justifica la suscripción. Durante los primeros 18 meses, la correlación con la retención y la renovación fue robusta.
El deterioro — mecanismo GoodhartAl entrar en el mes 19, el equipo de producto rediseñó el formato de las lecciones para reducir la tasa de abandono a mitad de lección. El resultado fue exitoso: las lecciones completadas subieron un 34% en un trimestre. Pero la duración promedio de las lecciones cayó de 12 minutos a 4 minutos, y el contenido se simplificó para reducir la fricción cognitiva. Las lecciones eran más fáciles de completar — y menos valiosas en términos de aprendizaje real.
La señal que nadie quiso verTres trimestres después del rediseño, la NSM seguía en máximos históricos. Pero la tasa de renovación anual cayó del 67% al 44%. Las entrevistas de churn mostraron un patrón consistente: los usuarios que no renovaban decían que habían "completado muchos cursos pero no aprendido lo suficiente para justificar el precio". La NSM medía completaciones — no aprendizaje. Y el equipo había optimizado exactamente la variable incorrecta.
La corrección — y el costo de la demoraLa NSM se redefinió como "usuarios que completan al menos un módulo y aplican el aprendizaje en una tarea práctica verificable". El cambio requirió rediseñar el producto, el curriculum y el sistema de tracking — nueve meses de trabajo. El costo de haber ignorado las señales durante tres trimestres fue una base de renovación dañada que tardó dos años en recuperarse.
El error no fue que la NSM se deteriorara — eso es casi inevitable con el tiempo. El error fue no tener el test diagnóstico corriendo trimestralmente. Si alguien hubiera preguntado "¿los usuarios que más lecciones completan renuevan más?" cada trimestre, la señal habría aparecido antes de que el daño fuera sistémico. La NSM no falló al negocio — el negocio no revisó la NSM.
Lisandro IserteCuándo revisar la NSM aunque los números estén bien.
El test diagnóstico resuelve el caso reactivo — cuando ya hay señales de deterioro. Pero hay tres momentos que justifican una revisión proactiva, independientemente de si los números están en verde.
Cuando cambia el modelo de monetización. Si el negocio pasa de freemium a enterprise, de suscripción a uso, de B2C a B2B — el valor que justifica el pago cambia, y la NSM debe reflejar ese cambio. Una NSM diseñada para un modelo freemium mide la activación de usuarios gratuitos; en un modelo enterprise, lo que importa es la adopción dentro de las cuentas, que es una métrica estructuralmente diferente.
Cuando el canal de adquisición principal cambia. Si el canal que traía el 60% de los usuarios pasa a traer el 20%, y un canal nuevo pasa a traer el 60%, la NSM puede estar midiendo a una población diferente sin que nadie lo haya decidido. El perfil del usuario que "califica" para la NSM puede haber cambiado estructuralmente, lo que hace que la misma métrica tenga diferente valor predictivo.
Cuando el producto agrega una capacidad nueva central. Si el producto lanza una funcionalidad que se convierte en el caso de uso principal de una porción significativa de los usuarios, el "flujo core" que define la NSM puede necesitar actualizarse para incluir esa nueva forma de entregar valor. Una NSM que no incluye la funcionalidad más usada no representa el valor central del producto.
07 — Errores frecuentesErrores frecuentes al gestionar el deterioro de la NSM.
Ignorar las señales porque "los números están bien"
El deterioro de la NSM es silencioso precisamente porque los números siguen subiendo. Esperar a que la NSM baje para revisar es esperar a que el problema sea evidente — en ese punto, ya causó daño en la retención, el revenue o la cultura del equipo. Las señales de alerta aparecen antes que la caída de la NSM: hay que saber buscarlas aunque el número esté en verde.
Cambiar la NSM sin diagnóstico explícito
El deterioro justifica revisar la NSM — no cambiarla automáticamente. Antes de cambiarla, el equipo debe poder articular cuál de los cuatro mecanismos está activo y qué evidencia lo confirma. Sin ese diagnóstico, el cambio de NSM puede ser una reacción ante una señal que tenía otra explicación — y el equipo pierde el aprendizaje acumulado de la NSM anterior sin haber entendido por qué falló.
Resolver el síntoma en lugar del mecanismo
Si el mecanismo de deterioro es gamificación, la solución no es cambiar la NSM — es identificar qué comportamientos están moviendo la métrica sin entregar valor y eliminarlos. Si el mecanismo es cambio de segmento, la solución puede ser segmentar la NSM por cohorte de adquisición en lugar de medirla de manera agregada. Cambiar la NSM cuando el mecanismo tiene otra solución produce pérdida de continuidad sin resolver el problema.
Preguntas frecuentes sobre el deterioro de la NSM.
¿Cómo saber si la NSM perdió su correlación causal con el valor entregado?
Hay cuatro señales diagnósticas. Primera: la NSM sube pero el revenue no sigue. Segunda: el equipo encontró formas de moverla que no representan valor real. Tercera: los usuarios con mejores números en la NSM tienen churn más alto o NPS más bajo. Cuarta: cuando la NSM baja, el equipo no sabe qué hacer diferente. Si aparecen dos o más de estas señales simultáneamente, corresponde iniciar el test diagnóstico formal.
¿La Ley de Goodhart explica por qué las NSMs se deterioran?
Parcialmente. La Ley de Goodhart explica el deterioro por gamificación — cuando el equipo optimiza el número en lugar del valor que representa. Pero hay mecanismos de deterioro que Goodhart no captura: el cambio en el modelo de negocio, el cambio en el segmento de adquisición y la saturación por optimización. Una NSM puede deteriorarse completamente sin ninguna intención de gamificarla — simplemente porque el negocio, el mercado o el cliente cambiaron.
¿Cuándo hay que revisar la NSM aunque parezca que funciona?
Hay tres momentos de revisión proactiva: cuando cambia el modelo de monetización, cuando el canal de adquisición principal cambia estructuralmente, y cuando el producto agrega una capacidad nueva que se convierte en el caso de uso principal. En los tres casos, la misma métrica puede seguir subiendo mientras mide a una población diferente o un valor diferente al que se diseñó para capturar.
Goodhart, C. (1975). Problems of Monetary Management: The U.K. Experience. En Papers in Monetary Economics. Reserve Bank of Australia.
Strathern, M. (1997). 'Improving ratings': audit in the British University system. European Review, 5(3), 305–321.
Croll, A., & Yoskovitz, B. (2013). Lean Analytics: Use Data to Build a Better Startup Faster. O'Reilly Media.
Ellis, S., & Brown, M. (2017). Hacking Growth: How Today's Fastest-Growing Companies Drive Breakout Success. Currency.
Kahneman, D. (2011). Thinking, Fast and Slow. Farrar, Straus and Giroux.
Términos del glosario