- Biblioteca
- Datos, lógica y razonamiento
- Pronósticos y calibración
- Agregación y sabiduría colectiva
- Extremización de pronósticos
Modelo mental
Extremización de pronósticos
Alejar un pronóstico de probabilidad combinado del 50 % hacia el 0 % o el 100 %, comprobando el ajuste con resultados pasados.
Descubre
Diez meteorólogos pronostican, cada uno, un 70 % de probabilidad de lluvia. Su promedio es del 70 %, pero el acuerdo por sí solo no te dice si aumentarlo mejoraría la precisión. ¿Qué deberías hacer antes de aplicar ese ajuste?
¿Cuándo justifica el acuerdo una mayor confianza?
Aprende cuándo puede ayudar alejar un pronóstico combinado del punto medio y cómo comprobar si mejora la precisión.
Comprende
Comprende
Extremizar significa alejar un pronóstico de probabilidad combinado del 50 % hacia el 0 % o el 100 %. Puede ayudar cuando combinar distintas evidencias produce un pronóstico demasiado prudente, pero el acuerdo por sí solo no demuestra que vaya a ayudar. Comprueba esto: Antes de ajustar un pronóstico, revisa si los expertos usaron información que se solapa.
Explicación completa
Explicación completa
Para extremizar pronósticos, primero combina las probabilidades individuales, por ejemplo, calculando su promedio. Después, aleja el resultado del 50 %. Un promedio superior al 50 % aumenta; uno inferior al 50 % disminuye. La dirección de este ajuste no indica si mejora la precisión.
Como ejemplo hipotético, cinco responsables de producto dan cada uno a una función un 65 % de probabilidad de éxito. Su promedio también es del 65 %. Si aportan información útil y diferente sobre los clientes, la información combinada podría justificar una mayor confianza. Si todos se basan en la misma encuesta, su acuerdo aporta menos información. Ni el acuerdo ni el hecho de trabajar por separado permiten determinar el ajuste adecuado.
El artículo proporcionado propone dos mecanismos. Primero, las probabilidades tienen límites: cerca del 100 %, un error tiene poco margen para aumentar la estimación, pero mucho más para reducirla. Bajo los supuestos del artículo sobre los errores, esto puede acercar el promedio al 50 %. Segundo, las personas pueden moderar su confianza de forma adecuada porque saben que les falta información. Combinar distintas evidencias puede entonces justificar una confianza mayor que la que suele expresar una persona por su cuenta. Esta es una explicación teórica, no una afirmación de que todas las personas que hacen pronósticos sean demasiado prudentes. [1]
El artículo informa de que extremizar mejoró los pronósticos de acontecimientos internacionales, según la puntuación de Brier. Esta mide el error de los pronósticos de probabilidad, y una puntuación más baja indica un mejor resultado. También señala casos en los que hacer los pronósticos menos extremos ayudó, posiblemente porque las estimaciones originales eran demasiado extremas. Por eso, importan el solapamiento de la información, la evidencia sesgada y el exceso de confianza previo; la independencia y el acuerdo no garantizan una mejora. Incluso con toda la información disponible puede quedar incertidumbre. [1]
Como orientación práctica, usa pruebas retrospectivas: compara distintos ajustes con los resultados de pronósticos pasados. Elige el ajuste con un conjunto de preguntas cuyo resultado ya se conoce y luego evalúalo con preguntas reservadas, es decir, excluidas de esa elección. Comprueba la calibración —si los acontecimientos a los que asignas probabilidades similares ocurren aproximadamente con esa frecuencia— y compara el error global de predicción con el del promedio sin ajustar. Usa un ajuste solo cuando esa evaluación respalde su uso en pronósticos comparables; de lo contrario, deja el promedio sin cambios.
Investigación
Investigación
- Evidencia empírica: Baron y sus colegas informan de que extremizar mejoró los pronósticos agregados de acontecimientos internacionales, según las puntuaciones de Brier. También mencionan casos posteriores en los que fue preferible hacer las estimaciones menos extremas, posiblemente porque las iniciales eran demasiado extremas. El fragmento no demuestra un beneficio universal [1]
- Teoría: El artículo propone que los límites de la escala de probabilidad pueden acercar una media aritmética al 50 % bajo sus supuestos sobre los errores. Cerca de un límite, los errores al alza y a la baja tienen distinto margen; el artículo distingue este efecto del mecanismo de la información faltante [1]
- Teoría: Las personas pueden reducir razonablemente su confianza para tener en cuenta la información que les falta, mientras que un grupo combina distintas evidencias. Los autores explican de forma explícita que esta prudencia individual no tiene por qué ser un sesgo y que el exceso de confianza puede reducir o invertir el efecto propuesto [1]
- Supuestos y límites del modelo: El argumento supone que los errores de información tienen la misma probabilidad de favorecer cualquiera de las dos direcciones respecto a la estimación basada en toda la información disponible. Los autores describen su modelo como aproximado, señalan que compartir información influye en la ventaja informativa del grupo y admiten que puede quedar incertidumbre incluso con toda la información disponible [1]
Limitaciones
Limitaciones
El fragmento está incompleto y no establece una magnitud de ajuste universal ni una regla que vincule un mayor acuerdo con una mayor extremización. Trabajar por separado no garantiza que quienes hacen los pronósticos usen evidencias diferentes, y compartir evidencias no demuestra que todos los ajustes vayan a fallar. Los mecanismos propuestos dependen de supuestos sobre la información y los errores; no son garantías para un pronóstico concreto. Las pruebas retrospectivas con preguntas reservadas y las comprobaciones de calibración son orientaciones prácticas que se ofrecen aquí, no un hallazgo comunicado en este fragmento. Su utilidad también depende de contar con suficientes preguntas cuyo resultado ya se conoce y que se parezcan razonablemente a los pronósticos que se van a ajustar.
Fuentes
Fuentes
- [1] Dos razones para hacer más extremos los pronósticos de probabilidad agregadosJonathan Baron, Barbara A. Mellers, Philip E. Tetlock, Eric Stone, Lyle H. Ungar - 2014
Pruébalo
Comprueba lo que has entendido
Cuatro analistas pronostican, cada uno, un 75 % de probabilidad de un resultado electoral. Un ajuste de extremización ha mejorado la precisión en preguntas comparables reservadas para la evaluación. Si aplicas ese ajuste a su promedio, ¿en qué dirección se mueve?
Ver la explicación de la guía
Respuesta: Sube del 75 %, alejándose del 50 %
Extremizar hace que una probabilidad superior al 50 % aumente hacia el 100 %. Aquí, la evaluación con preguntas reservadas respalda el uso del ajuste en pronósticos comparables. El acuerdo de los analistas por sí solo no demostraría que mejora la precisión, y la pregunta no ofrece una base para determinar la probabilidad final exacta.
¿Qué situación incluye de forma más explícita una conversación que podría hacer que las estimaciones dependieran de información compartida, lo que exige una comprobación antes de interpretar el acuerdo como evidencia adicional e independiente?
Ver la explicación de la guía
Respuesta: Ocho especialistas médicos consultan entre sí y llegan a un diagnóstico por consenso
Los especialistas hablan explícitamente sobre el caso entre sí, así que su acuerdo puede reflejar evidencia compartida e influencia mutua. Esto exige revisar el solapamiento de la información; no demuestra que extremizar tenga que fallar. Las otras situaciones también requieren una evaluación, porque trabajar por separado o usar modelos diferentes no garantiza información adicional útil ni una mayor precisión.
¿Qué afirmación describe mejor la explicación que propone el artículo sobre la información faltante y por qué extremizar puede ayudar?
Ver la explicación de la guía
Respuesta: Las personas pueden moderar razonablemente su confianza por la información que les falta, mientras que el grupo combina evidencias útiles y diferentes
El artículo propone que la prudencia individual puede ser adecuada para la información que tiene cada persona, mientras que combinar distintas evidencias puede justificar una mayor confianza. Se trata de un mecanismo teórico sujeto a condiciones. El solapamiento de la información, la evidencia sesgada o el exceso de confianza inicial pueden debilitar o invertir los argumentos a favor de extremizar.
Sigue explorando
Encuentra otra idea para la decisión que tienes por delante.
Toda la biblioteca de Reframo es de lectura gratuita. Explora otra guía cuando quieras.