La revisión por pares del futuro: Modelos computacionales para definir un revisor automático

• Autores: Juan José Montero Parodi
• Directores de la Tesis: Rosa Rodríguez Sánchez (dir. tes.)
• Lectura: En la Universidad de Granada ( España ) en 2026
• Idioma: español
• ISBN: 9791370153267
• Número de páginas: 304
• Enlaces
  • Tesis en acceso abierto en: DIGIBUG
• Resumen
  • español

    La revisión por pares es un mecanismo clave para garantizar la calidad de la literatura científica, si bien su viabilidad se ve comprometida por el crecimiento de los envíos, la carga acumulada y la presión temporal a los revisores. En este contexto, esta tesis aborda un problema transversal: cómo mejorar la eficiencia, la calidad y la concordancia de la evaluación de manuscritos, considerando (i) los factores conductuales que condicionan el esfuerzo del revisor, tales como la procrastinación y el sesgo de presente; y (ii) el potencial de las herramientas computacionales para asistir a la generación de informes y la valoración estructurada de la calidad del manuscrito. Este trabajo se basa en dos ejes complementarios. El primero aborda el desarrollo y la validación de modelos del comportamiento del revisor, incorporando (i) un marco formal que caracteriza decisiones con sesgo de presente y evalúa mecanismos de motivación e incentivos; y (ii) un estudio empírico destinado a caracterizar perfiles de revisores según sus intenciones, sus preferencias, su nivel de esfuerzo y su sensibilidad a la compensación. Igualmente, se analiza la variabilidad y las posibles fuentes de heterogeneidad en la evaluación, incluyendo evidencias entre asociaciones con las características del revisor, como su experiencia o su rango, y sobre las dinámicas de atención en decisiones relacionadas con el sistema editorial. El segundo eje plantea un marco operativo para la evaluación estructurada de manuscritos a través de tres dimensiones – Accesibilidad, Contribución y Experimentación (AccConExp) –, así como su correspondiente ejecución computacional. Para ello, se introduce ASPRPreACE, un modelo multitarea basado en arquitecturas de resumen de documentos largos (long-document summarization) que (i) genera informes de revisión y (ii) realiza una clasificación a nivel de oraciones de acuerdo a AccConExp y su polaridad. El enfoque igualmente integra un mecanismo de atención global guiado por palabras clave, operando sobre la totalidad del manuscrito. Los resultados experimentales evidencian mejoras frente a baselines relevantes en métricas estándar de similitud textual, alineamiento con anotaciones de revisores humanos, y preferencia sistemática en evaluaciones externas mediante modelos de lenguaje como jueces (LLM-as-a-judge). En su conjunto, esta tesis integra fundamentos teóricos y evidencia empírica que permiten caracterizar y atenuar las limitaciones del proceso de revisión por pares, planteando un enfoque reproducible y transferible destinado a respaldar la revisión por pares, sin reemplazar el juicio experto.

  • English

    Peer review constitutes a cornerstone mechanism for safeguarding the integrity and quality of the scientific literature. However, it’s operational sustainability is increasingly compromised by the escalation in manuscript submissions, the accretion of reviewing workloads and the stringent temporal constraints borne by reviewers. Within this context, this thesis addresses a problem of broad relevance: improving the efficiency, evaluative quality and inter-rater reliability of manuscript assessment, while accounting for (i) behavioral determinants that govern the allocation of reviewer effort – most notably procrastination and present bias – and (ii) the potential of computational methodologies to support peer-review report drafting and the structured appraisal of manuscript quality. This document is structured around two complementary axes. The first axis addresses the development and empirical validation of models of reviewer behavior, comprising (i) a formal framework that characterizes decision-making under present bias and evaluates motivational and incentive-compatible mechanisms; and (ii) an empirical study aimed at characterizing reviewer typologies with respect to stated intentions, preferences, effort provision and responsiveness to compensation. The analysis further examines variability and prospective sources of heterogeneity in evaluative outcomes, including associations with reviewer covariates (e.g., experience and seniority), as well as attentional dynamics in decisions pertaining to the editorial management system. The second axis proposes an operational framework for structured manuscript assessment along three dimensions – Accessibility, Contribution and Experimentation (AccConExp) – together with its computational instantiation. Accordingly, the thesis introduces ASPRPreACE, a multitask model built upon longdocument summarization architectures that (i) generates review reports and (ii) performs sentence-level classification with respect to AccConExp dimensions and evaluate polarity. The approach additionally incorporates a keyword-guided global attention mechanism operating over the manuscript in its entirety. Experimental results indicate consistent improvements over relevant baselines across standard textual similarity metrics, alignment with annotations provided by human reviewers, and systematic preference in external evaluations conducted under a largelanguage- model-as-judge protocol. Taken as a whole, this thesis consolidates theoretical foundations and empirical evidence to delineate and attenuate limitations inherent to the peer-review process, and it advances a reproducible and transferable approach designed to support peer-review without substituting expert judgment.