Trellis-2: Modelado 3D ahora en Macs Apple Silicon

Fuentes: Trellis-2 image-to-3D model now runs natively on Apple Silicon Macs

Microsoft's vanguardia imagen-a-modelo 3D, TRELLIS.2, puede ahora ejecutarse de forma nativa en Macs con Apple Silicon sin necesidad de una GPU NVIDIA, gracias a una adaptación desarrollada por Shivampkumar y publicada en GitHub. Este desarrollo significativo aprovecha PyTorch MPS, permitiendo a los usuarios con Macs equipados con chips M1 o posteriores generar modelos 3D directamente a partir de imágenes. El proceso, que tarda aproximadamente 3.5 minutos en un chip M4 Pro con 24GB de memoria unificada, produce archivos OBJ y GLB con colores de vértice adecuados para su uso en diversas aplicaciones 3D. Si bien la adaptación ofrece capacidades impresionantes, también tiene limitaciones: la exportación de texturas no está disponible actualmente, el relleno de agujeros está desactivado y el rendimiento es más lento que las implementaciones basadas en CUDA debido al uso de alternativas PyTorch puras para tareas computacionalmente intensivas como la convolución 3D dispersa. Los usuarios necesitan solicitar acceso a los pesos del modelo con acceso restringido desde Hugging Face. El código del proyecto se publica bajo la Licencia MIT, mientras que los pesos del modelo subyacente están sujetos a sus respectivas licencias, incluyendo una licencia personalizada de Meta para DINOv3 y una licencia CC BY-NC 4.0 para RMBG-2.0.