Sebastian Raschka · 🌙 · I am an LLM Research Engineer with over a decade of experience in artificial intelligence. My work bridges academia and industry, including roles as senior engineer at Lightning AI and as a statistics professor at ...

Noticias que mencionan Sebastian Raschka

Guía técnica sobre las encodings posicionales en los LLM modernos

Este artículo técnico explora los mecanismos mediante los cuales los modelos de lenguaje de gran escala (LLM) codifican y procesan la información de posición de los tokens. A diferencia de las explicaciones superficiales, el texto ofrece un recorrido didáctico que combina ejemplos visuales, cálculos

Curso de 8 videos para construir modelos de razonamiento desde cero

Sebastián Raschka ha publicado una serie de ocho videos de 11 horas que detalla la implementación de modelos de razonamiento desde cero utilizando Python y PyTorch. Este recurso educativo, que acompaña a su libro 'Build a Reasoning Model (From Scratch)', se centra en el desarrollo de capacidades de

Jev: un modelo de clasificación de texto que supera a los LLMs en velocidad

El modelo de inteligencia artificial Jev ha generado un notable interés en la comunidad técnica reciente por su capacidad para clasificar textos con mayor velocidad y menor coste que los modelos de lenguaje grandes (LLM) actuales. Aunque los LLMs de última generación, como GPT, pueden realizar tarea

OpenArch: implementaciones de PyTorch de arquitecturas LLM modernas

OpenArch es un repositorio de código abierto que ofrece implementaciones de PyTorch de las arquitecturas de modelos de lenguaje de gran escala (LLM) más recientes, escritas desde cero para priorizar la legibilidad y el aprendizaje sobre el rendimiento de producción. El proyecto se basa en el catálog

No te referirás a extinguidos: programadores ante la era de los LLM

En 1993, cuando Steven Spielberg vio la prueba de un Tiranosaurio rex fotorrealista generada por ordenador para Jurassic Park, el maestro del stop-motion Phil Tippett asumió que su oficio había muerto: «Me siento extinto», resumió. Aquel desplazamiento del stop-motion por el CGI es la metáfora que e