Programa: Introducción a la evaluación de la investigación. - Historia y evolución de la evaluación de la investigación (¿qué, para qué, por qué, cómo y quién?) - Principales métodos y métricas de evaluación: Metodologías, componentes y desafíos. - Problemas y limitaciones de los métodos tradicionales de evaluación. Razones y necesidad de la reforma. - La Ciencia abierta-La crisis del sistema- ¿por qué la necesidad de reformar el sistema de evaluación? - Casos de estudio y ejemplos de problemas surgidos del sistema actual. - Movimientos y declaraciones internacionales sobre la reforma (DORA, Leiden Manifesto, etc.). Nuevas métricas y enfoques de evaluación - Primeros pasos hacia la Reforma del sistema (DORA, LEIDEN, The Metric Tide,) - Acuerdo para la Reforma del sistema de evaluación (ARRA) - Métricas alternativas (altmetrics, impacto societal, etc.). - Evaluación cualitativa vs. cuantitativa. - Evaluación basada en narrativas y logros cualitativos. Evaluación del impacto social y económico - Definición y ejemplos de impacto social y económico de la investigación. - Métodos para medir el impacto más allá de las publicaciones académicas. - Herramientas y marcos para la evaluación del impacto social. Ética y transparencia en la evaluación - Importancia de la ética en la evaluación de la investigación. - Transparencia y reproducibilidad en la evaluación. - Prevención de conflictos de interés y sesgos en la evaluación. CoARA (Coalición para la Reforma de la Investigación). - Alcance, principios y compromisos. - El CSIC y CoARA. - Plan de actuación-Estrategia de implementación CSIC. Implementación de nuevos sistemas de evaluación. - Estrategias para implementar cambios en instituciones y organismos de investigación (Benchmarking de iniciativas CoARA -Ejemplos de instituciones que han adoptado nuevas prácticas de evaluación) - Desafíos y barreras para la adopción de nuevas métricas y enfoques. - ANECA y CoARA - Pilotos de implementación CoARA. Herramientas y Recursos para la Evaluación. - Plataformas y software para el seguimiento y análisis del impacto de la investigación. - Recursos y guías para los investigadores sobre cómo mejorar su visibilidad y impacto. - Redes y comunidades de práctica para compartir experiencias y mejores prácticas. - Herramientas para una nueva generación de ejercicios de evaluación. Políticas y regulaciones - Políticas gubernamentales y de agencias de financiamiento sobre la evaluación de la investigación. - Regulaciones y directrices internacionales. - Impacto de las políticas de acceso abierto en la evaluación de la investigación. Futuro de la evaluación de la investigación. - Tendencias emergentes y futuras direcciones en la evaluación de la investigación. - El papel de la inteligencia artificial y el big data en la evaluación futura. - Cómo prepararse para futuros cambios en el sistema de evaluación.

El curso está destinado a la comunidad de investigadores e investigadoras CSIC y otros técnicos de gestión de la investigación que quieran conocer cómo funcionan en la actualidad los sistemas de evaluación de la actividad investigadora en sus distintos niveles (investigador, grupos, institución), gestionados a nivel institucional, nacional, regional, europeo¿; y como estos sistemas van a evolucionar con el advenimiento de la reforma del sistema de evaluación que propugna CoARA. Se pretende dar una panorámica completa de la evolución de este proceso que es clave para la transformación del ciclo de investigación hacia el nuevo paradigma de la ciencia abierta. El curso cubrirá todos los aspectos relevantes en las reformas que se persiguen y sus implicaciones prácticas. Pretende incrementar el conocimiento de la comunidad CSIC sobre los temas propuestos y fomentar una mentalidad crítica y abierta hacia la mejora continua del sistema de evaluación.

1. Introducción a la evaluación de la investigación. Jordi Molas-Gallart. 2. Razones y necesidad de la reforma de la evaluación. Zaida Chinchilla-Rodríguez. 3. Nuevas métrica y enfoques de evaluación. Zaida Chinchilla-Rodríguez. 4. La evaluación de la vinculación entre ciencia y sociedad (y el impacto socio-económico). Ismael Ràfols. 5. Ética e integridad en la investigación y en la evaluación. Zaida Chinchilla-Rodríguez. 6.CoARA y su implementación en España. Alejandro Santos Botana. 7. Herramientas y recursos para la evaluación. Luis Dorado González. 8. Evaluación científica. Políticas nacionales e internacionales. Isidro F. Aguillo. 9. Debate entre Isidro Aguillo e Ismael Rafols. Isidro F. Aguillo.

Este curso se ha organizado dentro el marco de las actividades del Plan de Acción de la Comisión COARA-CSIC, por el subgrupo de Comunicación, difusión y formación de la misma. El curso se ha celebrado dentro del Plan de Formación 2025 del Gabinete de Formación del CSIC.-- Dirección del curso: Agnès Ponsati Obiols.

Peer reviewed