Un ensayo controlado desmonta la percepción de velocidad de la IA en programadores expertos

Fuentes: The gauge broke

Un ensayo controlado aleatorizado de METR con 16 desarrolladores experimentados de código abierto que trabajaban en bases de código conocidas con herramientas de IA de frontera concluyó que se sentían alrededor de un 20% más rápidos mientras eran, medidos con cronómetro, cerca de un 19% más lentos. La brecha entre percepción y realidad ronda los 40 puntos, y afecta precisamente al perfil donde se concentra la mayor parte del trabajo profesional: desarrolladores con experiencia sobre código ya existente. En proyectos greenfield y con perfiles junior, en cambio, el efecto se invierte y resulta positivo. Datos agregados de Faros AI, DORA y GitClear, sobre más de 10.000 desarrolladores y 200 millones de líneas modificadas, apuntan en la misma dirección: más código generado, más pull requests fusionadas, más churn y refactorización a la baja, sin ganancias netas de entrega y con caída de estabilidad. El autor, que sostiene desde 2022 que la generación se abarató y la verificación se encareció, argumenta que el sentimiento de velocidad es ahora una lectura invertida del indicador real y pide sustituir el "se siente rápido" por métricas de producción y reasignar recursos a la fase de revisión.