¿Qué tal funcionó nuestra predicción del Mundial?
En la ‘newsletter’, Kiko Llaneras evalúa el acierto (relativo) del modelo de EL PAÍS durante el pasado torneo
¡Hola! Os escribo en la víspera de Navidad con una recopilación de historias propias y ajenas. Ha quedado un boletín interesante, pero poco festivo. Se nota que aún no estoy de vacaciones.
🏆 1. ¿Qué tal fue nuestra predicción del Mundial?
Con el torneo ya acabado, hoy quería contaros que a nuestro modelo de predicción le fue bastante bien. Primero, porque despertó gran interés y tuvo muchos lectores fieles, que volvían cada día. Pero también porque sus pronósticos han cumplido.
¿Cómo podemos juzgar eso?
Nos ayuda que la final la disputaron Argentina y Francia, que eran dos de los tres favoritos del modelo. Cualquiera que lo escrute superficialmente verá que era razonable. Por supuesto, esa evaluación no es rigurosa y bien pudo salir mal: una final entre Marruecos y Croacia habría sido un duro golpe para el modelo (y para sus autores, Borja Andrino y yo).
Si queremos evaluar el modelo con seriedad, tenemos que medir dos cosas: su confiabilidad y su exactitud.
Decimos que un predictor es confiable si los sucesos que predice ocurren con la probabilidad prometida. El gráfico siguiente demuestra que nuestro modelo lo ha sido:
- A lo largo del Mundial hicimos cientos de predicciones del tipo: “España pasará a octavos con probabilidad 82%”, “Brasil solo ganará el torneo el 21% de veces”, o “Argentina ganará la final contra Francia con probabilidad 52%”. Lo que dice el gráfico anterior es que esas predicciones acertaron y fallaron con la frecuencia prevista. Por ejemplo, los eventos de probabilidad entre 0% y 15% ocurrieron solo el 4% de las veces, y aquellos con probabilidad 85%–100% ocurrieron casi todos.
La otra virtud de un modelo probabilístico es su exactitud, es decir, su capacidad para decir lo qué va a ocurrir con la máxima certeza. Al respecto, nuestro modelo nunca prometió mucho, porque lo diseñamos para ser confiable y eso le exigió cautela. A su favorito —Brasil— no le daba más que un 21% de opciones de ganar el torneo, porque era consciente de algo importante: ¡no sabía quién iba a ganar el mundial!
Pero, ¿qué tan exacto ha sido nuestro modelo en comparación con otras predicciones sofisticadas? Para evaluar esto, lo habitual es usar una puntuación Brier o algo similar. Un modelo es exacto si predice con 100% de firmeza y acierta siempre (Brier = 0); y es totalmente inexacto si hace predicciones al 100% de firmeza y falla siempre (Brier = 1). En medio hay un abanico de grises, según tu cautela y tu acierto.
En la tabla podéis ver que nuestro modelo logró un Brier de 0,20, que es bastante mejor que una predicción aleatoria (0,25). Mejor aún: batimos a las apuestas de Betfair y a los modelos de FiveThirtyEight y Opta, según las cuentas del blog Futbolmetrix, que ha comparado decenas de modelos (quedamos 13 de 59).¿Significa eso que nuestro modelo lo hará mejor que las apuestas sistemáticamente? No, solo tuvimos más suerte. Mirando un único torneo, hacerlo un poco mejor o un poco peor es casualidad.
Si queréis aún más detalles, podéis leer la evaluación de nuestro modelo de 2018. El resumen es que nuestra aproximación funciona, no hace predicciones mágicas ni nada impresionante, pero está en la liga de los otros modelos y cumple lo que promete.
🤖 2. El salto adelante de la IA
Hace tres semanas os hablé de la IA chatGPT, pero desde entonces seguro que habéis vuelto a escuchar su nombre: ha tenido un éxito enorme. Es la primera aplicación de este tipo que se vuelve viral.
Si queréis verla en acción, hemos grabado un video sencillo usando chatGPT para escribir un cuentito —«El alienígena Zor en Sevilla»— y otra IA parecida, Midjourney, para crear unas ilustraciones que lo acompañen. Lo podéis ver en EL PAÍS y en YouTube. Aquí en la foto tenéis a Zor.
Y otra en París:
Después de pasarme unos días usando chatGPT, puedo decir que es capaz de escribir textos parecidos a los míos en forma y tono, pero con un matiz clave: se inventa los datos. Digamos que ya es capaz de ser peligroso… y está a un milímetro de resultarme utilísimo.
Sabéis que llevo meses alucinado con el potencial de esta nueva tecnología. Creo que su irrupción puede ser la historia más importante de este 2022. Como ha escrito Derek Thompson, estas extrañas herramientas “pueden hacernos cambiar de opinión sobre cómo trabajamos, cómo pensamos y qué es realmente la creatividad humana”.
✍️ 3. El periodista pionero que acertó con Qatar
Me gustó esto que escribió Simon Kuper sobre Grant Wahl, el periodista que falleció en Qatar mientras cubría los cuartos de final. Yo, igual que Kuper, he escrito sobre el fútbol que ocurrió en el torneo, pero Wahl hizo eso y algo más:
- “Aquí en Doha, mientras la mayoría de los periodistas se centraban en el fútbol, él había seguido haciendo campaña contra las fechorías de Qatar. Había sido detenido brevemente por presentarse a un partido con una camiseta arco iris en apoyo de los derechos LGBT+”.
- “Grant se preocupaba por el sufrimiento de la gente y dedicó incontables horas a documentarlo. Antes de la Copa Mundial, recorrió los hoteles intentando entrevistar al personal sobre sus condiciones de trabajo, mientras eludía a las autoridades qataríes.”
- “Hay otro tipo de periodistas que se sienten atraídos por la gente en el poder. Para ellos, el punto culminante de su carrera es ser convocados en la parte delantera del avión durante 20 minutos con el secretario de Estado, que utiliza tu nombre de pila (que le han comunicado sus ayudantes), finge preguntarte tu opinión y luego te cuenta una historia falsa. El equivalente en el fútbol es el periodista que vive 30 segundos con la superestrella después del partido: una pregunta aduladora y un selfie. Pero Grant miraba más hacia abajo que hacia arriba.”
📉 4. Tres historias de equipo
De los langostinos a los polvorones: así ha subido el precio de la cena de Navidad, plato a plato. Es una noticia regular, pero quedó estupendamente presentada.
Cómo reconocer los síntomas de la bronquiolitis en un bebé. Gran explicación visual. El virus respiratorio sincitial afecta a siete de cada diez niños menores de un año y es el principal responsable de esta enfermedad.
¿Aciertan quienes no compran lotería? Los compañeros de ‘Hoy en EL PAÍS’ me invitaron a hablar de lotería, de los motivos para no jugar —en sentido estadístico— y de los motivos para sí hacerlo.
📗 5. ‘Piensa claro’
En diciembre llegan las listas de libros y estoy contento de ver que Piensa claro se ha colado en varias. Lo incluyeron en su lista la gente de El orden Mundial y también Ramón González Férriz. Además, Bernardo Marín lo reseñó para Babelia.
Otra alegría es que el libro sigue teniendo muchas y buenas valoraciones en Amazon y Goodreads.
¿Me ayudas? Reenvía esta newsletter, o si no estás suscrito, apúntate tú. Es un boletín exclusivo para suscriptores de EL PAÍS, pero cualquiera puede recibirlo un mes de prueba. También puedes seguirme en Twitter, en @kikollan, o escribirme con pistas o comentarios, a kllaneras@elpais.es.
Tu suscripción se está usando en otro dispositivo
¿Quieres añadir otro usuario a tu suscripción?
Si continúas leyendo en este dispositivo, no se podrá leer en el otro.
FlechaTu suscripción se está usando en otro dispositivo y solo puedes acceder a EL PAÍS desde un dispositivo a la vez.
Si quieres compartir tu cuenta, cambia tu suscripción a la modalidad Premium, así podrás añadir otro usuario. Cada uno accederá con su propia cuenta de email, lo que os permitirá personalizar vuestra experiencia en EL PAÍS.
En el caso de no saber quién está usando tu cuenta, te recomendamos cambiar tu contraseña aquí.
Si decides continuar compartiendo tu cuenta, este mensaje se mostrará en tu dispositivo y en el de la otra persona que está usando tu cuenta de forma indefinida, afectando a tu experiencia de lectura. Puedes consultar aquí los términos y condiciones de la suscripción digital.