Repolode
NVlabs

NVlabs/LongLive

Monorepositório de pesquisa da NVIDIA com quatro projetos para geração de vídeos longos, modelos de mundo e modelos de mundo-ação para robótica, cada um em seu próprio diretório.

Estrelas
2,813
Forks
266
Issues abertas
2
Último commit
anteontem

O que é?

LongLive é uma coleção de projetos de pesquisa da NVIDIA voltados à geração autorregressiva de vídeos de longa duração. O repositório está organizado em quatro diretórios independentes: LongLive 1.0 gera vídeos longos em tempo real a partir de prompts sequenciais do usuário; LongLive 2.0 oferece quantização NVFP4 e paralelismo de sequência para treinar e servir modelos de vídeo longo; LongLive-Plug destila recursos reutilizáveis em adaptadores LoRA que podem ser conectados a modelos de vídeo downstream; e Long-WAM oferece modelos de mundo-ação com contexto longo para treinar e implantar políticas de robôs.

Cada projeto pode ser obtido separadamente usando clone parcial e sparse checkout, para que os leitores baixem apenas o que precisam. Os checkpoints lançados estão disponíveis no Hugging Face, incluindo LongLive-1.3B, várias versões do LongLive 2.0 e políticas do Long-WAM para LIBERO, RoboTwin 2.0 e RoboCasa.

O repositório também lista projetos de terceiros que se baseiam no LongLive, como adaptações para modelagem de mundo em tempo real e geração de vídeos em streaming com vários planos.

Recursos principais

  • 01Geração interativa de vídeos longos em tempo real, orientada por prompts sequenciais (LongLive 1.0).
  • 02Treinamento e inferência com quantização NVFP4 e FP8, com suporte a paralelismo de sequência (LongLive 2.0).
  • 03Destilação baseada em LoRA que transfere recursos entre os modelos Wan2.1, Wan2.2 e MiniMax-H3 (LongLive-Plug).
  • 04Treinamento e inferência de políticas para robôs nos benchmarks LIBERO, RoboTwin 2.0 e RoboCasa (Long-WAM).
  • 05Cada projeto tem seu próprio código, documentação e pesos de modelo, e pode ser obtido com sparse checkout.

Casos de uso

  • Gerar vídeos de vários minutos a partir de um fluxo de prompts de texto para ferramentas criativas interativas.
  • Servir modelos de geração de vídeos longos em GPUs NVIDIA, usando quantização para reduzir o consumo de memória e a latência.
  • Reutilizar um recurso destilado em várias arquiteturas de geração de vídeo sem precisar retreinar cada uma.
  • Treinar e avaliar políticas de manipulação robótica em benchmarks de simulação ou em braços robóticos reais.

Início rápido

  1. 1

    Clone o repositório com um sparse checkout parcial

    git clone --filter=blob:none --sparse --single-branch --branch main --depth 1 https://github.com/NVlabs/LongLive.git
  2. 2

    Acesse o repositório clonado

    cd LongLive
  3. 3

    Faça checkout apenas do projeto Long-WAM

    git sparse-checkout set Long-WAM
  4. 4

    Acesse o diretório do projeto Long-WAM

    cd Long-WAM

Antes de usar

  • Este é um monorepo com quatro projetos de pesquisa independentes, então você precisa escolher um e seguir as instruções de configuração específicas dele.
  • Os modelos avaliados foram executados em GPUs NVIDIA de alto desempenho, como H100 e GB200, portanto provavelmente são necessários muitos recursos de GPU.

Tópicos

Perguntas frequentes

O que é LongLive?
Monorepositório de pesquisa da NVIDIA com quatro projetos para geração de vídeos longos, modelos de mundo e modelos de mundo-ação para robótica, cada um em seu próprio diretório. LongLive é uma coleção de projetos de pesquisa da NVIDIA voltados à geração autorregressiva de vídeos de longa duração. O repositório está organizado em quatro diretórios independentes: LongLive 1.0 gera vídeos longos em tempo real a partir de prompts sequenciais do usuário; LongLive 2.0 oferece quantização NVFP4 e paralelismo de sequência para treinar e servir modelos de vídeo longo; LongLive-Plug destila recursos reutilizáveis em adaptadores LoRA que podem ser conectados a modelos de vídeo downstream; e Long-WAM oferece modelos de mundo-ação com contexto longo para treinar e implantar políticas de robôs.
LongLive é gratuito? Qual é a licença?
LongLive é open source sob a licença Apache-2.0. Confira os termos da licença antes de usá-lo em produtos comerciais.
LongLive ainda é mantido?
Manutenção ativa. O último commit de LongLive foi em 19 de out. de 2026.
Para que posso usar LongLive?
Gerar vídeos de vários minutos a partir de um fluxo de prompts de texto para ferramentas criativas interativas. Servir modelos de geração de vídeos longos em GPUs NVIDIA, usando quantização para reduzir o consumo de memória e a latência. Reutilizar um recurso destilado em várias arquiteturas de geração de vídeo sem precisar retreinar cada uma. Treinar e avaliar políticas de manipulação robótica em benchmarks de simulação ou em braços robóticos reais.
Como instalar LongLive?
Clone o repositório com um sparse checkout parcial: git clone --filter=blob:none --sparse --single-branch --branch main --depth 1 https://github.com/NVlabs/LongLive.git Acesse o repositório clonado: cd LongLive Faça checkout apenas do projeto Long-WAM: git sparse-checkout set Long-WAM Acesse o diretório do projeto Long-WAM: cd Long-WAM
Onde consigo LongLive?
O código-fonte e as instruções de instalação estão no GitHub: https://github.com/NVlabs/LongLive

Resumo gerado por IA a partir do README do projeto. As estatísticas do GitHub são atualizadas diariamente.

Projetos relacionados