La educación es uno de los sectores que trabaja para crear una base de datos que recopile investigaciones sobre cómo mejorar el aprendizaje.Copyright: Martin Bureau/AFP vía Getty
Los financiadores están invirtiendo decenas de millones de dólares en un ambicioso plan para resolver el mayor problema del asesoramiento científico: proporcionar pruebas a los gobiernos. Su objetivo es construir un sistema que permita a los formuladores de políticas de todo el mundo generar síntesis rápidas de ciencia que les ayuden a desarrollar políticas basadas en evidencia dirigidas a Resolver cuestiones críticas como el cambio climático.
“En última instancia, podemos beneficiarnos enormemente de un mundo en el que una recopilación completa de evidencia sobre cada problema social importante esté disponible, continuamente actualizada y disponible para todos”, dice Will Moy, quien dirige Campbell Collaboration, una organización internacional sin fines de lucro. que respalda las revisiones científicas sociales.
¿Cuál es la mejor manera de abordar el cambio climático? Un “banco de pruebas” puede ayudar a los científicos a encontrar respuestas
Aunque los investigadores producen una gran cantidad de estudios en áreas relevantes para las políticas, los estudios que demuestran el peso de la evidencia sobre un tema son raros en muchos campos y no se utilizan de manera rutinaria para guiar la formulación de políticas. “Existe una enorme demanda” de estudios de este tipo por parte de los responsables de las políticas, dice Jane Gould, directora de investigación del Consejo de Investigación Económica y Social, una agencia de financiación británica. “Pero la oferta no está a la altura”.
La recopilación de evidencia es “todo lo que el mundo sabe sobre cómo resolver un problema importante en un solo lugar”, dice Moy. En medicina, los médicos utilizan habitualmente miles de revisiones y análisis sistemáticos. Combinaciones finas De estudios como ensayos clínicos aleatorios de medicamentos. Muchos estudios sobre este tema proporcionan poca información sobre si el tratamiento es beneficioso o perjudicial. Pero la mayoría de los demás campos carecen de una base tan amplia (ver 'Falta de combinaciones'). Puede llevar meses o años extraer significado de un enorme conjunto de investigaciones, y históricamente los financiadores han gastado una miseria en síntesis de conocimientos en comparación con los miles de millones que gastan en nuevas investigaciones.
Fuente: Colaboración Campbell
Para empezar a remediar esta situación, el Consejo de Investigación Económica y Social y la Fundación Wellcome, un financiador de investigaciones biomédicas en Londres, anunciaron el 21 de septiembre una inversión de £9,2 millones (US$12,2 millones) y alrededor de £45 millones, respectivamente, en más de cinco años, existen bases de datos y herramientas que pueden ayudar a compilar la investigación. El Ministro de Ciencia británico, Patrick Vallance El presidente del Fondo Wellcome, John Arne Röttingen, anunció la financiación en un evento en Nueva York vinculado a la Cumbre del Futuro de las Naciones Unidas, una reunión destinada a tratar de formar un mundo mejor, incluso a través de la ciencia.
Cuatro principios para hacer que la síntesis de evidencia sea más útil para las políticas
Los investigadores acogen con agrado la noticia, que se cree que es una de las mayores inversiones en recopilación de evidencia, y dicen que es oportuna ya que los avances en inteligencia artificial aceleran el proceso de encontrar y combinar estudios. “Es muy emocionante”, dice Isabelle Mercier, investigadora del Programa de las Naciones Unidas para el Desarrollo que ha estado recopilando pruebas. Defensa de la recopilación de pruebas en las Naciones Unidas“Hace cuatro años, esto habría sido demasiado grande para pensar en ello, pero ahora estamos empezando a ver que realmente podemos hacerlo”, dice.
Pero la IA hace que la tarea sea más difícil, porque los chatbots impulsados por IA como ChatGPT son capaces de generar resúmenes de investigaciones que parecen creíbles pero que pueden ser engañosos. “El desafío aquí es ¿cómo podemos hacer que lo que es verdaderamente confiable se destaque de lo que no lo es?”, dice Moi.
Lento y difícil
La producción de combinaciones suele ser lenta, difícil y costosa. Los investigadores que realizan una revisión sistemática deben explorar bases de datos mundiales de trabajos publicados y no publicados en busca de estudios potencialmente relevantes. Luego filtran una larga lista de miles de estudios hasta los menos relevantes, evalúan su confiabilidad, extraen los datos y combinan los resultados, a veces utilizando un método estadístico llamado metanálisis. Incluso una vez terminadas, las síntesis de evidencia a menudo no llegan a los responsables de las políticas y rápidamente quedan obsoletas a medida que surgen nuevas investigaciones. “Si un formulador de políticas viene con una pregunta, no debería llevarle tres meses encontrar la investigación”, dice James Thomas, especialista en síntesis de investigaciones de la Universidad de Londres. “Es ridículo”.
El problema se agudizó durante la pandemia de COVID-19, cuando las autoridades de todo el mundo querían formulaciones rápidas para fundamentar las decisiones sobre medicamentos, mascarillas y confinamientos. Al principio, los científicos no pudieron hacerlo disponible lo suficientemente rápido, pero luego lo produjeron. Muchas combinaciones duplicadas y malas críticas..
Un nuevo enfoque para la síntesis de evidencia
El sueño de los científicos es que cualquier persona, en cualquier lugar, pueda elaborar una síntesis adaptada a su pregunta y a su parte del mundo, casi con solo presionar un botón. Para ello, los investigadores quieren crear “bancos de evidencia”: bases de datos compartidas de estudios preseleccionados etiquetados con información, como método y ubicación, y con datos en un formato común para que puedan combinarse. Las herramientas de IA capacitadas harán la mayor parte del trabajo duro de clasificar los estudios y resumir los datos, con control de calidad por parte de humanos (por ejemplo, evaluando cualquier sesgo en los estudios subyacentes).
Algunas bases de datos han llegado a la mitad del camino. La Education Endowment Foundation (EEF), una organización benéfica de Londres, tiene una base de datos de más de 3.500 estudios sobre educación. Utilizando esta base, la organización ha construido un conjunto de revisiones sistemáticas que revelan sus hallazgos. El efecto de la tutoría, las tareas y el tamaño de la clase en el aprendizajeLa organización comparte la base de datos y las revisiones con varios países para evitar la duplicación del trabajo de otros países. “Lo ideal sería que, en lugar de realizar seis revisiones sistemáticas independientes, se pudiera realizar una excelente revisión que compartiéramos la capacidad de realizar”, afirma Jonathan Kay, que dirige el trabajo de síntesis de evidencia de la fundación.
Instalaciones en vivo
Las inversiones recientes pueden eventualmente conducir a una serie de bases de datos similares a las del Fondo para el Medio Ambiente Mundial, que contengan estudios listos para resumir en áreas políticas importantes como la protección ambiental. A partir de estas bases, los defensores quieren construir bancos de evidencia “viva” –o constantemente actualizada– que revelaría, por ejemplo, que: ¿Qué funciona para reducir el cambio climático?Mejorar la salud mental y mejorar las oportunidades de empleo para los jóvenes.
Durante la pandemia de COVID-19, los formuladores de políticas han estado ansiosos por recopilar rápidamente evidencia para responder preguntas como si los medicamentos tratan eficazmente el virus.Copyright: George Fry/AFP vía Getty
La Fundación Wellcome tiene la intención de financiar consorcios que desarrollen plataformas y herramientas de datos que ayuden a llegar a este punto. “Este es un paso extraordinario por parte de Wellcome”, afirma Tariq Khokhar, jefe de datos para ciencia y salud de la organización benéfica. La fundación es más conocida por financiar investigaciones sobre salud, pero este dinero puede ayudar a comprender la evidencia en cualquier disciplina. “Esta es realmente una base sobre la que cualquiera puede construir”, afirma.
La Comisión de Investigación Económica y Social planea financiar un consorcio único para acelerar el proceso de recopilación de evidencia y desarrollo de versiones de prueba de formulaciones in vivo en áreas como el envejecimiento saludable. Khokhar dice que los dos esfuerzos serán diferentes pero pueden superponerse.
La Comisión Económica y Social quiere que su grupo desarrolle formas de facilitar a los responsables de la formulación de políticas el uso de la síntesis de evidencia. Por ejemplo, algunos funcionarios del Reino Unido han comenzado a utilizar una herramienta de inteligencia artificial llamada Redbox Copilot para analizar y resumir documentos y discursos gubernamentales. Los investigadores pueden diseñar herramientas que canalicen “la evidencia de revisión sistemática también hacia este proceso”, dice Gould.
£55 millones no serán suficientes para lograr el tipo de síntesis perfecta de evidencia con la que sueñan los defensores. Pero los financiadores esperan añadir más al fondo y que esta inversión inicial anime a otros financiadores a contribuir. “La idea es que cualquier inversión pueda basarse en un conjunto de trabajos que ya se han realizado”, dice Khokar.