Config Drift Checker es una herramienta de código abierto que permite a los equipos de desarrollo comprobar automáticamente si la configuración de Claude Code —el archivo CLAUDE.md, las skills y los hooks— sigue comportándose como debería tras cada cambio. Su objetivo es detectar regresiones provocadas por actualizaciones del propio agente, modificaciones del modelo subyacente o ediciones de compañeros en pull requests que nadie valida.
La herramienta convierte las expectativas del equipo sobre su configuración en casos de prueba en el formato de evaluación del SDK de Anthropic, con graders de expresiones regulares, uso de herramientas, ficheros y rúbricas LLM. Un comando de instalación genera los primeros casos a partir del setup existente, por lo que no es necesario partir de cero. Las pruebas se ejecutan en un espacio de trabajo aislado con el plugin cargado cada vez que se publica una nueva versión de Claude Code (gracias a un watcher que consulta npm), en cada pull request que toca la configuración y bajo demanda manual.
Cada ejecución registra las llamadas a herramientas, las respuestas completas y el veredicto razonado de cada grader, y compara los resultados con una línea base para emitir un check verde o rojo, un comentario en la pull request, una alerta en Slack y un informe HTML autocontenido. Sobre ese núcleo se añaden dos funcionalidades: una ablación que ejecuta los casos con y sin el plugin para cuantificar qué aporta cada skill o hook, y una generación automática de casos negativos y de hook a partir de la configuración del usuario. La instalación se realiza mediante el marketplace de plugins de Claude y una acción compuesta de GitHub. La licencia es FSL-1.1-Apache-2.0, que permite usar, modificar y autoalojar el software, pero prohíbe ofrecer un servicio comercial competidor.