San Francisco Declaration on Research Assessment (DORA)

La “Declaración de San Francisco sobre la Evaluación de la Investigación” (DORA) es un conjunto de recomendaciones para mejorar la evaluación de la investigación científica desarrolladas por un grupo de editores de revistas académicas durante la reunión anual de la American Society for Cell Biology (ASCB).

Estas recomendaciones se centran en las prácticas relacionadas con los artículos de investigación publicados en revistas revisadas por pares.

La iniciativa DORA (San Francisco Declaration on Research Assessment) cuenta con el apoyo de un amplio abanico de organismos de investigación, editoriales y financiadores internacionales. Entre sus principales organizaciones promotoras se encuentran la Swiss National Science Foundation y UK Research and Innovation como entidades visionarias; y como sustentadores, instituciones como la American Society for Cell Biology (ASCB), The Company of Biologists, EMBO, Howard Hughes Medical Institute (HHMI), el Netherlands Research Council (NWO), el Luxembourg National Research Fund (FNR), PLOS, eLife, el Research Council of Norway y la Wellcome Trust. Además, participan como contribuyentes organizaciones como Cancer Research UK, F1000Research, la Iowa State University Library, Research Ireland y la University of Calgary. El proyecto también cuenta con el respaldo adicional de la fundación Arcadia, que apoya las herramientas TARA (Tools to Advance Research Assessment) para el desarrollo de nuevas políticas y prácticas en la evaluación académica.

La “Declaración de San Francisco sobre la Evaluación de la Investigación” cubre la necesidad de mejorar la forma en que las agencias de financiación, las instituciones académicas y otros grupos evalúan la investigación científica. Mediante el desarrollo de las recomendaciones, se pretende mejorar la forma en que se evalúa la calidad de la producción científica.

En concreto, sus objetivos son:

• Concienciar sobre nuevas herramientas y procesos en la evaluación de la investigación y el uso responsable de métricas que promueven la coherencia y la transparencia en la toma de decisiones.
• Facilitar la implementación de nuevas políticas y prácticas en las decisiones de contratación, promoción y financiación.
• Difundir la reforma de la evaluación de la investigación en todas las disciplinas académicas y a nivel mundial.
• Mejorar la equidad reclamando una mayor representación de los investigadores en el diseño de prácticas de evaluación de la investigación que aborden directamente las desigualdades estructurales que se dan en el mundo académico.

Los principales beneficiarios son los destinatarios de las recomendaciones de DORA, que son las agencias financiadoras, instituciones académicas, revistas, organizaciones que proporcionan métricas e investigadores individuales.

La declaración está dirigida a todo tipo de organizaciones de cualquier disciplina científica, para que muestren su apoyo firmándola públicamente.

Desde la publicación de la “Declaración de San Francisco sobre la Evaluación de la Investigación”, en 2013, más de 20.000 personas y organizaciones de 148 países se han sumado a la iniciativa.

En julio de 2021, Arcadia, una fundación sin ánimo de lucro, concedió a DORA una subvención de 1,2 millones de dólares, por un periodo de tres años, con la que ha creado el proyecto TARA (Tools to Advance Research Assessment).

Este proyecto permite a DORA identificar, comprender y hacer visibles los criterios y estándares que utilizan las universidades a la hora de tomar decidir sobre la contratación, promoción y permanencia. Con esta información DORA crea recursos y guías prácticas sobre la reforma de la evaluación de la investigación dirigidas a instituciones académicas.

Con la colaboración del “Luxembourg National Research Fund”, DORA presentó un cortometraje llamado “Balanced, broad, responsible: A practical guide for research evaluators”, acompañado de un documente breve que los financiadores de la investigación pueden utilizar para promover un enfoque más holístico en la evaluación de las propuestas de financiación.

En septiembre de 2021, DORA organizó un taller para financiadores de la investigación juntamente con “Funding Organizations for Gender Equality Community of Practice” (FORGEN CoP), con el objetivo de optimizar el uso de los CV narrativos para la evaluación de subvenciones y mitigar la parcialidad.

Como próximo paso, DORA está organizando un taller para financiadores en febrero de 2022 con la colaboración FORGEN CoP, para supervisar la eficacia de los CV narrativos para la evaluación de subvenciones.

A partir del 1 de enero de 2022, DORA ha aplicado una serie de cambios en los procedimientos de gobernanza para conseguir una gobernanza antirracista:

• Distribuyendo el poder fuera de Europa y Norteamérica en el Comité Directivo.
• Reduciendo las barreras financieras para las organizaciones de las economías en desarrollo o en transición que deseen apoyar DORA.
• Garantizando que los puestos de liderazgo en el Comité Directivo reflejen la amplia diversidad del mundo académico.

Las recomendaciones de DORA se centran solo en las prácticas relacionadas con los artículos de investigación publicados en revistas revisadas por pares, por lo que dejan fuera productos adicionales, como los conjuntos de datos, cuya importancia a la hora de evaluar la eficacia de la investigación aumentará en el futuro.

En 2021, DORA lanzó SPACE, una herramienta destinada a facilitar la reforma de la evaluación académica en las universidades, examinando al mismo tiempo qué infraestructura se necesita para apoyar el desarrollo de nuevas políticas y prácticas.

En 2018, se presentó la hoja de ruta de DORA, un plan estratégico para avanzar en la reforma de la evaluación de la investigación global a nivel institucional, nacional y de agencias de financiación. En concreto, con ello se quieren tomar medidas destinadas a:

• Aumentar la concienciación sobre la necesidad de desarrollar alternativas creíbles a los usos inadecuados de las métricas en la evaluación de la investigación.
• Investigar y promover herramientas y procesos que faciliten las mejores prácticas en la evaluación de la investigación.
• Ampliar el alcance y el impacto del trabajo de DORA en todas las disciplinas académicas y en nuevas áreas.

En el sitio web de la iniciativa se pueden encontrar una colección de materiales destinados a facilitar el desarrollo de políticas y prácticas de investigación responsable y evaluación de los investigadores.

Además, cuenta con un repositorio llamado “Reimagining academic assessment: stories of innovation and change” que incluye estudios de casos que sirven como fuente de inspiración para las organizaciones e instituciones que buscan mejorar sus prácticas de evaluación de la carrera académica.

• La Declaración: https://sfdora.org/read/read-the-declaration-espanol/
• About DORA: https://sfdora.org/about-dora/
• DORA Roadmap: https://sfdora.org/2018/06/27/dora-roadmap-a-two-year-strategic-plan-for-advancing-global-research-assessment-reform-at-the-institutional-national-and-funder-level/
• Resource Library: https://sfdora.org/resource-library/
• Reimagining academic assessment: stories of innovation and change: https://sfdora.org/dora-case-studies/