paper-preflight es una herramienta de línea de comandos diseñada para auditar la integridad de las referencias en documentos LaTeX antes de su envío. A diferencia de los modelos de lenguaje grandes que pueden inventar citas, esta herramienta consulta directamente bases de datos académicas en vivo, como Crossref, dblp, arXiv, DataCite, PubMed y OpenAlex, para validar cada trabajo citado. El sistema verifica la existencia de la obra, la coincidencia con el texto, el estado de retraction y si un preprint ha sido publicado formalmente. En caso de ambigüedad, el sistema indica la incertidumbre en lugar de adivinar, garantizando que no se atribuyan falsas acusaciones a autores o instituciones.
La herramienta opera en su versión 0.2, una fase temprana de desarrollo que prioriza la precisión sobre la velocidad. Los desarrolladores han implementado un sistema de detección de errores que incluye códigos específicos para cada tipo de problema, como DOI incorrectos, autores inexistentes o citas duplicadas. Para evaluar su eficacia, se han realizado pruebas comparativas contra herramientas existentes y un benchmark público llamado HALLMARK. En una evaluación de 814 referencias de 20 papers de arXiv, paper-preflight mostró una tasa de falsos positivos de solo 1.7 por cada 100 referencias, frente a tasas superiores al 40% de otras herramientas como CheckIfExist o HalluCiteChecker. Además, en el benchmark HALLMARK, la herramienta alcanzó una precisión del 97.9% en la detección de entradas falsificadas, superando significativamente a otros 5 competidores en términos de precisión y reducción de falsos positivos. Esta herramienta es especialmente útil para investigadores que buscan evitar la publicación de papers con errores de citación que podrían dañar su reputación académica.
