Investigadores de la Universidad Carolina, la Università della Svizzera italiana y Oracle Labs han desarrollado una nueva metodología para evaluar el rendimiento de máquinas virtuales que no alcanzan un estado de estabilidad. Estudios previos demostraron que incluso microbenchmarks deterministas pequeños no siempre logran un rendimiento constante tras el calentamiento, lo que invalida supuestos tradicionales al calcular promedios o intervalos de confianza. El equipo analiza este fenómeno en cargas de trabajo más grandes, argumentando que la falta de estado estacionario es una propiedad inherente y no un error. Utilizando el conjunto de benchmarks Renaissance para la Máquina Virtual Java, demuestran que su enfoque produce intervalos de confianza que fallan al capturar el rendimiento real un 20 % menos que las metodologías existentes. Este avance corrige sesgos en la evaluación de sistemas gestionados, considerando las transiciones entre segmentos de rendimiento estable.
