Repolode
NVlabs

NVlabs/LongLive

Monorepositorio de investigación de NVIDIA con cuatro proyectos para generar videos largos, crear modelos de mundo y modelos de mundo-acción para robots, cada uno en su propio directorio.

Estrellas
2,813
Forks
266
Issues abiertos
2
Último commit
anteayer

¿Qué es?

LongLive es una colección de proyectos de investigación de NVIDIA centrados en la generación autorregresiva de videos de larga duración. El repositorio está organizado en cuatro directorios independientes: LongLive 1.0 genera videos largos en tiempo real a partir de indicaciones secuenciales del usuario; LongLive 2.0 ofrece cuantización NVFP4 y paralelismo de secuencias para entrenar y servir modelos de video de larga duración; LongLive-Plug destila capacidades reutilizables en adaptadores LoRA que se conectan a modelos de video posteriores; y Long-WAM ofrece modelos de mundo-acción con contexto largo para entrenar e implementar políticas robóticas.

Cada proyecto se puede obtener por separado mediante un clon parcial y sparse checkout, para descargar únicamente la parte necesaria. Los checkpoints publicados están disponibles en Hugging Face e incluyen LongLive-1.3B, varias variantes de LongLive 2.0 y políticas de Long-WAM para LIBERO, RoboTwin 2.0 y RoboCasa.

El repositorio también enumera proyectos de terceros basados en LongLive, como adaptaciones para el modelado de mundos en tiempo real y la generación de video en streaming con múltiples tomas.

Funciones clave

  • 01Generación interactiva de videos largos en tiempo real a partir de indicaciones secuenciales (LongLive 1.0).
  • 02Entrenamiento e inferencia cuantizados con NVFP4 y FP8, con soporte para paralelismo de secuencias (LongLive 2.0).
  • 03Destilación basada en LoRA que transfiere capacidades entre los modelos Wan2.1, Wan2.2 y MiniMax-H3 (LongLive-Plug).
  • 04Entrenamiento e inferencia de políticas robóticas en los benchmarks LIBERO, RoboTwin 2.0 y RoboCasa (Long-WAM).
  • 05Cada proyecto tiene su propio código, documentación y pesos del modelo, y se puede obtener mediante sparse checkout.

Casos de uso

  • Generar videos de varios minutos a partir de un flujo de indicaciones de texto para herramientas creativas interactivas.
  • Servir modelos de generación de videos largos en GPU de NVIDIA, usando cuantización para reducir el uso de memoria y la latencia.
  • Reutilizar una capacidad destilada en varias arquitecturas de generación de video sin volver a entrenarlas.
  • Entrenar y evaluar políticas de manipulación robótica en benchmarks de simulación o con brazos robóticos reales.

Inicio rápido

  1. 1

    Clona el repositorio con un sparse checkout parcial

    git clone --filter=blob:none --sparse --single-branch --branch main --depth 1 https://github.com/NVlabs/LongLive.git
  2. 2

    Entra en el repositorio clonado

    cd LongLive
  3. 3

    Haz checkout únicamente del proyecto Long-WAM

    git sparse-checkout set Long-WAM
  4. 4

    Entra en el directorio del proyecto Long-WAM

    cd Long-WAM

Antes de usarlo

  • Es un monorepo con cuatro proyectos de investigación independientes, así que debes elegir uno y seguir sus propias instrucciones de configuración.
  • Los modelos evaluados se ejecutaron en GPU NVIDIA de gama alta, como H100 y GB200, por lo que probablemente se necesiten muchos recursos de GPU.

Temas

Preguntas frecuentes

¿Qué es LongLive?
Monorepositorio de investigación de NVIDIA con cuatro proyectos para generar videos largos, crear modelos de mundo y modelos de mundo-acción para robots, cada uno en su propio directorio. LongLive es una colección de proyectos de investigación de NVIDIA centrados en la generación autorregresiva de videos de larga duración. El repositorio está organizado en cuatro directorios independientes: LongLive 1.0 genera videos largos en tiempo real a partir de indicaciones secuenciales del usuario; LongLive 2.0 ofrece cuantización NVFP4 y paralelismo de secuencias para entrenar y servir modelos de video de larga duración; LongLive-Plug destila capacidades reutilizables en adaptadores LoRA que se conectan a modelos de video posteriores; y Long-WAM ofrece modelos de mundo-acción con contexto largo para entrenar e implementar políticas robóticas.
¿LongLive es gratuito? ¿Qué licencia tiene?
LongLive es open source bajo la licencia Apache-2.0. Revisa los términos de la licencia antes de usarlo en productos comerciales.
¿LongLive sigue mantenido?
Mantenimiento activo. El último commit de LongLive fue el 19 oct 2026.
¿Para qué puedo usar LongLive?
Generar videos de varios minutos a partir de un flujo de indicaciones de texto para herramientas creativas interactivas. Servir modelos de generación de videos largos en GPU de NVIDIA, usando cuantización para reducir el uso de memoria y la latencia. Reutilizar una capacidad destilada en varias arquitecturas de generación de video sin volver a entrenarlas. Entrenar y evaluar políticas de manipulación robótica en benchmarks de simulación o con brazos robóticos reales.
¿Cómo se instala LongLive?
Clona el repositorio con un sparse checkout parcial: git clone --filter=blob:none --sparse --single-branch --branch main --depth 1 https://github.com/NVlabs/LongLive.git Entra en el repositorio clonado: cd LongLive Haz checkout únicamente del proyecto Long-WAM: git sparse-checkout set Long-WAM Entra en el directorio del proyecto Long-WAM: cd Long-WAM
¿Dónde consigo LongLive?
El código fuente y las instrucciones de instalación están en GitHub: https://github.com/NVlabs/LongLive

Resumen generado por IA a partir del README del proyecto. Las estadísticas de GitHub se actualizan a diario.

Proyectos relacionados