Modelo mental

Auditoría de métricas

Un proceso sistemático para evaluar si tus indicadores de rendimiento reflejan realmente tus objetivos o incentivan conductas no deseadas.

Descubre

La calificación de seguridad de un hospital mejoró drásticamente cuando sus administradores anunciaron que medirían el éxito mediante el seguimiento de las complicaciones de los pacientes. Años después, una investigación reveló algo inquietante: los cirujanos habían empezado a evitar los casos de alto riesgo para proteger sus puntuaciones, lo que impedía que los pacientes más enfermos encontraran atención.

¿Qué salió mal?

Descubre cómo comprobar si tus métricas miden lo que importa.

Comprende

Comprende

Auditar tus métricas significa comprobar si los números que sigues reflejan lo que te importa o si las personas simplemente están aprendiendo a manipular el sistema. Cuando haces que algo sea medible y vinculas las recompensas a ese indicador, las personas ajustan su conducta de forma natural, lo que suena bien, pero puede resultar contraproducente. Por ejemplo, si a los empleados de un centro de atención telefónica les piden que reduzcan al mínimo la duración de las llamadas, podrían colgarles a los clientes solo para mantener bajas sus cifras. Pruébalo: elige una métrica que sigas y pregúntate qué haría alguien si solo le importara ese número.

Explicación completa

Explicación completa

Cómo funciona la auditoría de métricas

La auditoría de métricas sigue un proceso sencillo: identifica el objetivo que quieres alcanzar, examina qué estás midiendo realmente y analiza cómo podrían responder las personas a esos incentivos. Empieza por expresar el objetivo con palabras claras, sin números. Si tu objetivo es «ofrecer una excelente atención al cliente», pero solo mides el «tiempo medio de las llamadas», has creado una brecha entre lo que buscas y lo que mides.

Cómo se manipulan las métricas

Cuando las métricas determinan las recompensas, las personas buscan mejorar el indicador en lugar de alcanzar el objetivo. Esto ocurre siguiendo una secuencia predecible: primero se introduce la métrica con buenas intenciones. Después, las personas descubren qué acciones mejoran sus cifras con mayor eficiencia. Finalmente, esas acciones pueden alejarse del objetivo original, a veces de forma drástica. Un equipo de ventas al que se recompensa por los ingresos podría intentar vender productos caros que los clientes no necesitan. Del mismo modo, los docentes evaluados por los resultados de los exámenes podrían centrarse solo en estrategias para responderlos, a costa de un aprendizaje más profundo.

Señales de alerta que debes revisar

Busca tres señales de alerta: conductas que parecen técnicamente correctas, pero que no te parecen adecuadas; atajos que sacrifican la calidad por la rapidez; o resultados que mejoran con una rapidez sospechosa sin mejoras equivalentes en otros aspectos. En la atención sanitaria, un ejemplo clásico es el de los cirujanos que evitan casos difíciles para mantener sus tasas de mortalidad: las cifras parecen excelentes, pero los pacientes tienen más dificultades para acceder a la atención.

Pasos prácticos

Primero, diversifica tus mediciones. Ningún número por sí solo refleja objetivos complejos. Combina métricas cuantitativas con comentarios cualitativos y mide varias dimensiones del rendimiento en lugar de una sola estadística fácil de manipular. Segundo, mantén algunas métricas en secreto o cámbialas periódicamente para que las personas no puedan limitarse a optimizar su conducta en función de objetivos conocidos. Tercero, usa las métricas como herramientas de diagnóstico en lugar de convertirlas en el único criterio para otorgar recompensas: comprende qué te dicen los números sobre el sistema, pero toma decisiones con un criterio más amplio.

Cuándo es más importante auditar

Audita tus métricas cuando haya mucho en juego, cuando detectes patrones sospechosos o cuando implementes nuevos sistemas de medición. Presta especial atención cuando las métricas sustituyan por completo el criterio humano o cuando las personas evaluadas puedan influir en los propios datos. Cuanto más peso tenga una métrica en las decisiones sobre contratación, despido, financiación o bonificaciones, más cuidado debes poner en auditarla para detectar consecuencias no deseadas.

Investigación

Investigación

La investigación sobre la corrupción de las métricas revela que, cuando las medidas cuantitativas se vinculan a decisiones en las que hay mucho en juego, distorsionan inevitablemente la conducta. La ley de Campbell, formulada por el científico social Donald T. Campbell en 1979, establece que «cuanto más se utilice un indicador social cuantitativo para tomar decisiones sociales, más expuesto estará a presiones para corromperlo y más probable será que distorsione y corrompa los procesos sociales que pretende supervisar»[1]. El economista Charles Goodhart observó de forma independiente un fenómeno similar en la política monetaria y señaló que «cuando una medida se convierte en un objetivo, deja de ser una buena medida»[2].

Una investigación reciente y exhaustiva de Manheim (2024) sintetiza estos hallazgos y ofrece estrategias prácticas para construir métricas menos susceptibles a la corrupción, como la diversificación, la aleatorización y la especificación a posteriori[3]. El trabajo de Jerry Z. Muller sobre la «fijación por las métricas» muestra cómo la obsesión por medir se ha extendido por la educación, la atención sanitaria, la actividad policial y las empresas, y a menudo sustituye el criterio profesional por el cumplimiento burocrático[4]. La investigación de Marilyn Strathern sobre las culturas de auditoría en la educación superior muestra cómo las calificaciones de rendimiento pueden, paradójicamente, perjudicar la misma calidad que pretenden mejorar[5].

Los estudios empíricos documentan estos fallos en distintos ámbitos. Un estudio de UCLA Health de 2024 descubrió que una métrica federal de seguridad del paciente (PSI-04) tenía fallos fundamentales para evaluar la atención del accidente cerebrovascular. Esto podría crear incentivos para evitar procedimientos que salvan vidas en los pacientes más enfermos[6]. En la educación, la presión de los exámenes estandarizados ha dado lugar al fenómeno de «enseñar para el examen»: los estudiantes obtienen buenos resultados sin desarrollar una comprensión o unas habilidades equivalentes.

La investigación sugiere varias estrategias para mitigar estos problemas: usar varias medidas en lugar de una sola métrica, mantener algunas métricas en secreto para evitar su manipulación, incorporar el criterio humano cualitativo junto con las medidas cuantitativas y revisar periódicamente las métricas para detectar consecuencias no deseadas. Quizá lo más importante sea que las métricas sirvan como herramientas de diagnóstico para orientar la toma de decisiones, en lugar de sustituirla por completo.

Limitaciones

Limitaciones

La auditoría de métricas tiene limitaciones importantes. No todo lo que merece la pena hacer se puede medir fácilmente, y algunos intentos de cuantificar objetivos complejos pueden hacer más daño que bien. En los ámbitos creativos, los trabajos con un fuerte componente de investigación o las profesiones dedicadas al cuidado de personas, las métricas rígidas pueden pasar por alto dimensiones cruciales del rendimiento. Además, algunas organizaciones carecen de los recursos o los conocimientos necesarios para realizar auditorías exhaustivas, y las métricas secretas pueden debilitar la confianza y la transparencia. También existe una tensión entre evitar la manipulación y comunicar expectativas claras: las personas merecen saber cómo se las evaluará. Por último, las métricas pueden ser necesarias para la rendición de cuentas en organizaciones grandes donde la supervisión personal no es viable; abandonarlas por completo no siempre es práctico ni deseable.

Fuentes

Fuentes

Pruébalo

Comprueba lo que has entendido

Un equipo de desarrollo de software usa las «líneas de código escritas» como medida de productividad. Con el tiempo, los responsables observan que el código se vuelve más extenso y aumentan los costes de mantenimiento. ¿Cuál es la explicación más probable?

Ver la explicación de la guía

Respuesta: Los programadores están añadiendo código innecesario para alcanzar los objetivos

Este caso muestra cómo se manipula una métrica en la práctica. Cuando las «líneas de código» se convierten en el objetivo, los desarrolladores tienen un incentivo para escribir código extenso y redundante, aunque esto dificulte el mantenimiento del software y contradiga el objetivo real de crear software eficiente y de alta calidad. La métrica ha dejado de reflejar la productividad real.

¿Cuál de las siguientes estrategias es la más eficaz para reducir la manipulación de métricas en un sistema de evaluación del rendimiento en el que hay mucho en juego?

Ver la explicación de la guía

Respuesta: Combinar varias medidas con el criterio humano cualitativo

La investigación muestra que la diversificación —usar varias medidas que sean más difíciles de manipular a la vez—, combinada con el criterio cualitativo, es más eficaz que cualquier estrategia por sí sola. Las métricas secretas pueden debilitar la confianza, y medir con frecuencia solo acelera la manipulación. El criterio humano ayuda a detectar las distorsiones de las métricas y capta dimensiones del rendimiento que los números pasan por alto.

Verdadero o falso: si las personas logran «manipular» tu métrica, eso significa que el cálculo de la métrica es incorrecto.

Ver la explicación de la guía

Respuesta: Falso

La manipulación no significa que el cálculo sea incorrecto, sino que la métrica ha dejado de reflejar el objetivo. Las matemáticas pueden ser perfectas, pero las personas responden a los incentivos de formas que perjudican el resultado buscado. Esta es la idea central de la ley de Campbell y la ley de Goodhart: cualquier métrica vinculada a recompensas acabará optimizándose de maneras que quizá no sirvan al propósito original. La solución suele ser replantearte qué estás midiendo y por qué, en lugar de limitarte a corregir la fórmula.

Sigue explorando

Encuentra otra idea para la decisión que tienes por delante.

Toda la biblioteca de Reframo es de lectura gratuita. Explora otra guía cuando quieras.