Un nuevo conjunto de herramientas, denominado 'cc-canary', ha sido lanzado para ayudar a los usuarios a detectar la deriva en el rendimiento de Claude Code, el modelo de código de Anthropic. Desarrollado por Delta-Hq y disponible en GitHub, esta herramienta gratuita y de código abierto analiza los archivos de registro de sesiones de Claude Code (almacenados localmente en ~/.claude/projects/) para identificar posibles regresiones en el rendimiento. No requiere conexión a internet, cuenta de usuario, ni telemetría, garantizando la privacidad de los datos.
cc-canary genera informes detallados en formato Markdown o HTML, que incluyen métricas clave como la relación lectura/edición, el uso de tokens, la frecuencia de bucles de razonamiento y una comparación entre versiones del modelo. El informe también identifica una fecha de inflexión automática, indicando cuándo el rendimiento comenzó a deteriorarse. La herramienta está en una fase pre-alpha (versión 0.x), por lo que el formato de salida y el conjunto de métricas podrían cambiar. Los usuarios pueden instalar la herramienta a través de npx skills add delta-hq/cc-canary y ejecutarla con comandos como /cc-canary 60d para generar informes sobre los últimos 60 días de actividad. El objetivo es proporcionar una forma proactiva para que los desarrolladores monitoreen y mitiguen la deriva del modelo, similar a los canarios utilizados en las minas de carbón para detectar peligros.