Lance: Nueva alternativa para Big Data

Un nuevo formato de archivo y tabla llamado Lance ha surgido como una alternativa optimizada a Apache Iceberg y Delta Lake, generando interés en el mundo del big data y el almacenamiento de objetos. Desarrollado en 2025, Lance combina un formato de archivo similar a Parquet (optimizado para lecturas aleatorias) con un formato de tabla que permite agregar columnas de forma ad-hoc sin la necesidad de copiar todos los datos, preservando las características de control de versiones de Iceberg. Además, Lance incorpora soporte para índices, incluyendo BTree, índices invertidos para búsqueda de texto completo (FTS) y vectores (HNSW). El desarrollo de Lance, junto con tecnologías competidoras como Vortex, se atribuye a la creciente necesidad de gestionar lagos de datos multimodales impulsados por la proliferación de la inteligencia artificial. La aparición de Lance y otras innovaciones refleja una rápida evolución en la gestión de datos a gran escala, especialmente en el contexto de aplicaciones.