Interfaz gráfica de nodos, API y backend para ejecutar modelos de difusión localmente y generar imágenes, video, audio y contenido 3D.
NVlabs/LongLive
Monorepositorio de investigación de NVIDIA con cuatro proyectos para generar videos largos, crear modelos de mundo y modelos de mundo-acción para robots, cada uno en su propio directorio.
- Estrellas
- 2,813
- Forks
- 266
- Issues abiertos
- 2
- Último commit
- anteayer
¿Qué es?
LongLive es una colección de proyectos de investigación de NVIDIA centrados en la generación autorregresiva de videos de larga duración. El repositorio está organizado en cuatro directorios independientes: LongLive 1.0 genera videos largos en tiempo real a partir de indicaciones secuenciales del usuario; LongLive 2.0 ofrece cuantización NVFP4 y paralelismo de secuencias para entrenar y servir modelos de video de larga duración; LongLive-Plug destila capacidades reutilizables en adaptadores LoRA que se conectan a modelos de video posteriores; y Long-WAM ofrece modelos de mundo-acción con contexto largo para entrenar e implementar políticas robóticas.
Cada proyecto se puede obtener por separado mediante un clon parcial y sparse checkout, para descargar únicamente la parte necesaria. Los checkpoints publicados están disponibles en Hugging Face e incluyen LongLive-1.3B, varias variantes de LongLive 2.0 y políticas de Long-WAM para LIBERO, RoboTwin 2.0 y RoboCasa.
El repositorio también enumera proyectos de terceros basados en LongLive, como adaptaciones para el modelado de mundos en tiempo real y la generación de video en streaming con múltiples tomas.
Funciones clave
- 01Generación interactiva de videos largos en tiempo real a partir de indicaciones secuenciales (LongLive 1.0).
- 02Entrenamiento e inferencia cuantizados con NVFP4 y FP8, con soporte para paralelismo de secuencias (LongLive 2.0).
- 03Destilación basada en LoRA que transfiere capacidades entre los modelos Wan2.1, Wan2.2 y MiniMax-H3 (LongLive-Plug).
- 04Entrenamiento e inferencia de políticas robóticas en los benchmarks LIBERO, RoboTwin 2.0 y RoboCasa (Long-WAM).
- 05Cada proyecto tiene su propio código, documentación y pesos del modelo, y se puede obtener mediante sparse checkout.
Casos de uso
- Generar videos de varios minutos a partir de un flujo de indicaciones de texto para herramientas creativas interactivas.
- Servir modelos de generación de videos largos en GPU de NVIDIA, usando cuantización para reducir el uso de memoria y la latencia.
- Reutilizar una capacidad destilada en varias arquitecturas de generación de video sin volver a entrenarlas.
- Entrenar y evaluar políticas de manipulación robótica en benchmarks de simulación o con brazos robóticos reales.
Inicio rápido
- 1
Clona el repositorio con un sparse checkout parcial
git clone --filter=blob:none --sparse --single-branch --branch main --depth 1 https://github.com/NVlabs/LongLive.git - 2
Entra en el repositorio clonado
cd LongLive - 3
Haz checkout únicamente del proyecto Long-WAM
git sparse-checkout set Long-WAM - 4
Entra en el directorio del proyecto Long-WAM
cd Long-WAM
Antes de usarlo
- Es un monorepo con cuatro proyectos de investigación independientes, así que debes elegir uno y seguir sus propias instrucciones de configuración.
- Los modelos evaluados se ejecutaron en GPU NVIDIA de gama alta, como H100 y GB200, por lo que probablemente se necesiten muchos recursos de GPU.
Temas
Preguntas frecuentes
- ¿Qué es LongLive?
- Monorepositorio de investigación de NVIDIA con cuatro proyectos para generar videos largos, crear modelos de mundo y modelos de mundo-acción para robots, cada uno en su propio directorio. LongLive es una colección de proyectos de investigación de NVIDIA centrados en la generación autorregresiva de videos de larga duración. El repositorio está organizado en cuatro directorios independientes: LongLive 1.0 genera videos largos en tiempo real a partir de indicaciones secuenciales del usuario; LongLive 2.0 ofrece cuantización NVFP4 y paralelismo de secuencias para entrenar y servir modelos de video de larga duración; LongLive-Plug destila capacidades reutilizables en adaptadores LoRA que se conectan a modelos de video posteriores; y Long-WAM ofrece modelos de mundo-acción con contexto largo para entrenar e implementar políticas robóticas.
- ¿LongLive es gratuito? ¿Qué licencia tiene?
- LongLive es open source bajo la licencia Apache-2.0. Revisa los términos de la licencia antes de usarlo en productos comerciales.
- ¿LongLive sigue mantenido?
- Mantenimiento activo. El último commit de LongLive fue el 19 oct 2026.
- ¿Para qué puedo usar LongLive?
- Generar videos de varios minutos a partir de un flujo de indicaciones de texto para herramientas creativas interactivas. Servir modelos de generación de videos largos en GPU de NVIDIA, usando cuantización para reducir el uso de memoria y la latencia. Reutilizar una capacidad destilada en varias arquitecturas de generación de video sin volver a entrenarlas. Entrenar y evaluar políticas de manipulación robótica en benchmarks de simulación o con brazos robóticos reales.
- ¿Cómo se instala LongLive?
- Clona el repositorio con un sparse checkout parcial: git clone --filter=blob:none --sparse --single-branch --branch main --depth 1 https://github.com/NVlabs/LongLive.git Entra en el repositorio clonado: cd LongLive Haz checkout únicamente del proyecto Long-WAM: git sparse-checkout set Long-WAM Entra en el directorio del proyecto Long-WAM: cd Long-WAM
- ¿Dónde consigo LongLive?
- El código fuente y las instrucciones de instalación están en GitHub: https://github.com/NVlabs/LongLive
Resumen generado por IA a partir del README del proyecto. Las estadísticas de GitHub se actualizan a diario.
Proyectos relacionados
Motor open source de modelos de difusión para generar imágenes, video y audio, con inferencia y entrenamiento en equipos con poca VRAM.
Suite integral para ajustar modelos de difusión de imagen, video y audio en GPU de consumo, desde una interfaz web o la CLI.
Modelos fundacionales, conjuntos de datos y herramientas de NVIDIA para crear IA física en robots, vehículos autónomos e infraestructura inteligente.
Herramienta de código abierto basada en Stable Diffusion para generar cómics con personajes coherentes y secuencias de imagen a video de largo alcance.
Modelo de mundo interactivo de código abierto que genera escenas de juego jugables a partir de fotogramas low-poly mediante renderizado neuronal por streaming.