Noticias que mencionan Parquet

Error de conversión de datos en el visor de Hugging Face

El visor de datos de Hugging Face ha presentado un error de generación que impide la visualización completa del conjunto de datos 'nisten/opus5-5-doctor-patient-conversations-all-human-diseases'. El fallo técnico, identificado como un 'DatasetGenerationError', se debe a una incompatibilidad de tipos

DuckDB 2.0 optimiza consultas con I/O asíncrono y CTE recursivas

DuckDB 2.0, cuya versión alfa ya está disponible, introduce mejoras significativas en el rendimiento para usuarios que construyen pipelines de datos en lugar de motores de bases de datos. El artículo técnico detalla tres características clave que aceleran las consultas sin modificar el código SQL: e

Error técnico impide visualizar el dataset DeskForge-1M en Hugging Face

El dataset DeskForge-1M, alojado en la plataforma Hugging Face, presenta una interrupción técnica que impide la visualización completa de sus datos. La interfaz de usuario muestra únicamente una vista previa limitada debido a un error de generación de datos. El fallo técnico se debe a una excepción

DuckLake: formato de lago de datos integrado con DuckDB

DuckLake es un formato de lago de datos integrado y de catálogo abierto que se construye sobre SQL y Parquet. Este sistema permite almacenar metadatos en una base de datos de catálogo y los datos en archivos Parquet, facilitando la gestión de grandes volúmenes de información mediante un enfoque unif

Parseable: plataforma de observabilidad en Rust con formato Parquet

Parseable es una infraestructura de observabilidad diseñada específicamente para datos de telemetría, escrita en Rust y basada en una arquitectura de lago de datos columnar. Su objetivo principal es gestionar datos de alta cardinalidad con una eficiencia de costes significativamente menor que las so

Implementación técnica del formato Parquet en Haskell

El formato Parquet se ha convertido en el estándar de facto para el almacenamiento de datos en el ecosistema de ciencia de datos, ofreciendo una combinación superior de compresión y eficiencia en la consulta. Para los desarrolladores de Haskell, la capacidad de leer y escribir archivos Parquet es es

QuestDB busca ingeniero pre-venta para Norteamérica

QuestDB, una base de datos de series temporales de baja latencia, ha publicado una oferta de empleo para un ingeniero pre-venta en Norteamérica. El puesto, basado en Nueva York, requiere un perfil técnico que gestione el ciclo de ventas, validando arquitecturas y ejecutando pruebas de concepto para

DuckDB-Wasm permite bases de datos persistentes en el navegador

DuckDB-Wasm ha incorporado soporte para el Origin Private File System (OPFS), permitiendo a las aplicaciones web almacenar bases de datos persistentes directamente en el navegador. Esta funcionalidad, disponible en versiones 1.32.0 y posteriores, resuelve la limitación histórica de la herramienta, q

El fin de la programación tal y como la conocemos

La irrupción de modelos de inteligencia artificial con capacidades de razonamiento cercanas a las de un programador humano está marcando el inicio de una nueva era en el desarrollo de software. Un reciente episodio ilustra este cambio: la reescritura completa del entorno de ejecución Bun 1.4, que pa

Paneles de análisis rápidos desde un único archivo Parquet

Este artículo técnico explica cómo crear paneles de análisis interactivos y rápidos a partir de un único archivo Parquet almacenado en un bucket de R2, sin necesidad de una base de datos ni un motor de consultas. El autor, un ingeniero de MotherDuck, presenta el concepto del "cubo de datos" (data cu

Python Polars: hoja de referencia definitiva

Polars es una biblioteca de Python para transformar, analizar y visualizar datos mediante una API de DataFrames rápida y expresiva, publicada por primera vez por Ritchie Vink en 2020. A diferencia de pandas, no emplea un índice de filas y favorece la inmutabilidad y el encadenamiento de métodos; sus

DuckDB anuncia la versión 2.0 'Cyanoptera' con servidor nativo y tipo VARIANT

El equipo de DuckDB ha anunciado que la versión 2.0 de su base de datos analítica en proceso, bautizada 'Cyanoptera' en honor a la cerceta colorada (Anas cyanoptera), se lanzará este otoño. El salto a una versión mayor —la primera desde la 1.5 publicada en marzo— incorpora más de 10.000 commits y un