Quesma: RTK no reduce costes reales en benchmarks de IA

Fuentes: Quesma benchmarks show RTK fails to reduce real AI coding costs

RTK (Rust Token Killer) es una herramienta con más de 79.000 estrellas en GitHub que filtra y comprime la salida de la terminal antes de que un agente de IA la lea, con el objetivo de reducir los costes de codificación asistida. Sin embargo, un análisis de Quesma revela que sus promesas de ahorro no se traducen en una reducción real del gasto. Tras gastar más de 1.500 dólares en tokens y ejecutar 1.740 intentos en el benchmark Terminal-Bench 2.1, los resultados muestran que RTK no genera ahorros consistentes. En el modelo Fable 5.0, los ahorros dependían de una única tarea, mientras que en DeepSeek V4 Pro los costes aumentaron en promedio un 17%. La métrica "rtk gain", que indica tokens ahorrados, es engañosa porque no contabiliza los turnos adicionales que el agente puede necesitar debido a la compresión, lo que a menudo incrementa el coste total. Además, la salida de la terminal representa solo una pequeña fracción de la factura total (11% en Fable y 40% en DeepSeek), y los modelos actuales ya optimizan eficientemente estas lecturas mediante comandos propios. Quesma concluye que RTK es una optimización de nicho para modelos antiguos, pero no una solución genérica para abaratar la codificación con IA en la actualidad.