GUI em grafo de nós, API e backend para executar modelos de difusão localmente e gerar imagens, vídeos, áudio e conteúdo 3D.
NVlabs/LongLive
Monorepositório de pesquisa da NVIDIA com quatro projetos para geração de vídeos longos, modelos de mundo e modelos de mundo-ação para robótica, cada um em seu próprio diretório.
- Estrelas
- 2,813
- Forks
- 266
- Issues abertas
- 2
- Último commit
- anteontem
O que é?
LongLive é uma coleção de projetos de pesquisa da NVIDIA voltados à geração autorregressiva de vídeos de longa duração. O repositório está organizado em quatro diretórios independentes: LongLive 1.0 gera vídeos longos em tempo real a partir de prompts sequenciais do usuário; LongLive 2.0 oferece quantização NVFP4 e paralelismo de sequência para treinar e servir modelos de vídeo longo; LongLive-Plug destila recursos reutilizáveis em adaptadores LoRA que podem ser conectados a modelos de vídeo downstream; e Long-WAM oferece modelos de mundo-ação com contexto longo para treinar e implantar políticas de robôs.
Cada projeto pode ser obtido separadamente usando clone parcial e sparse checkout, para que os leitores baixem apenas o que precisam. Os checkpoints lançados estão disponíveis no Hugging Face, incluindo LongLive-1.3B, várias versões do LongLive 2.0 e políticas do Long-WAM para LIBERO, RoboTwin 2.0 e RoboCasa.
O repositório também lista projetos de terceiros que se baseiam no LongLive, como adaptações para modelagem de mundo em tempo real e geração de vídeos em streaming com vários planos.
Recursos principais
- 01Geração interativa de vídeos longos em tempo real, orientada por prompts sequenciais (LongLive 1.0).
- 02Treinamento e inferência com quantização NVFP4 e FP8, com suporte a paralelismo de sequência (LongLive 2.0).
- 03Destilação baseada em LoRA que transfere recursos entre os modelos Wan2.1, Wan2.2 e MiniMax-H3 (LongLive-Plug).
- 04Treinamento e inferência de políticas para robôs nos benchmarks LIBERO, RoboTwin 2.0 e RoboCasa (Long-WAM).
- 05Cada projeto tem seu próprio código, documentação e pesos de modelo, e pode ser obtido com sparse checkout.
Casos de uso
- Gerar vídeos de vários minutos a partir de um fluxo de prompts de texto para ferramentas criativas interativas.
- Servir modelos de geração de vídeos longos em GPUs NVIDIA, usando quantização para reduzir o consumo de memória e a latência.
- Reutilizar um recurso destilado em várias arquiteturas de geração de vídeo sem precisar retreinar cada uma.
- Treinar e avaliar políticas de manipulação robótica em benchmarks de simulação ou em braços robóticos reais.
Início rápido
- 1
Clone o repositório com um sparse checkout parcial
git clone --filter=blob:none --sparse --single-branch --branch main --depth 1 https://github.com/NVlabs/LongLive.git - 2
Acesse o repositório clonado
cd LongLive - 3
Faça checkout apenas do projeto Long-WAM
git sparse-checkout set Long-WAM - 4
Acesse o diretório do projeto Long-WAM
cd Long-WAM
Antes de usar
- Este é um monorepo com quatro projetos de pesquisa independentes, então você precisa escolher um e seguir as instruções de configuração específicas dele.
- Os modelos avaliados foram executados em GPUs NVIDIA de alto desempenho, como H100 e GB200, portanto provavelmente são necessários muitos recursos de GPU.
Tópicos
Perguntas frequentes
- O que é LongLive?
- Monorepositório de pesquisa da NVIDIA com quatro projetos para geração de vídeos longos, modelos de mundo e modelos de mundo-ação para robótica, cada um em seu próprio diretório. LongLive é uma coleção de projetos de pesquisa da NVIDIA voltados à geração autorregressiva de vídeos de longa duração. O repositório está organizado em quatro diretórios independentes: LongLive 1.0 gera vídeos longos em tempo real a partir de prompts sequenciais do usuário; LongLive 2.0 oferece quantização NVFP4 e paralelismo de sequência para treinar e servir modelos de vídeo longo; LongLive-Plug destila recursos reutilizáveis em adaptadores LoRA que podem ser conectados a modelos de vídeo downstream; e Long-WAM oferece modelos de mundo-ação com contexto longo para treinar e implantar políticas de robôs.
- LongLive é gratuito? Qual é a licença?
- LongLive é open source sob a licença Apache-2.0. Confira os termos da licença antes de usá-lo em produtos comerciais.
- LongLive ainda é mantido?
- Manutenção ativa. O último commit de LongLive foi em 19 de out. de 2026.
- Para que posso usar LongLive?
- Gerar vídeos de vários minutos a partir de um fluxo de prompts de texto para ferramentas criativas interativas. Servir modelos de geração de vídeos longos em GPUs NVIDIA, usando quantização para reduzir o consumo de memória e a latência. Reutilizar um recurso destilado em várias arquiteturas de geração de vídeo sem precisar retreinar cada uma. Treinar e avaliar políticas de manipulação robótica em benchmarks de simulação ou em braços robóticos reais.
- Como instalar LongLive?
- Clone o repositório com um sparse checkout parcial: git clone --filter=blob:none --sparse --single-branch --branch main --depth 1 https://github.com/NVlabs/LongLive.git Acesse o repositório clonado: cd LongLive Faça checkout apenas do projeto Long-WAM: git sparse-checkout set Long-WAM Acesse o diretório do projeto Long-WAM: cd Long-WAM
- Onde consigo LongLive?
- O código-fonte e as instruções de instalação estão no GitHub: https://github.com/NVlabs/LongLive
Resumo gerado por IA a partir do README do projeto. As estatísticas do GitHub são atualizadas diariamente.
Projetos relacionados
Um mecanismo open source de modelos Diffusion para gerar imagens, vídeos e áudio, com suporte a inferência e treinamento com pouca VRAM.
Suite completa para ajustar modelos de difusão de imagem, vídeo e áudio em GPUs de consumo, pela interface web ou CLI.
Modelos de base, datasets e ferramentas open world da NVIDIA para criar IA física em robôs, veículos autônomos e infraestrutura inteligente.
Ferramenta de código aberto baseada em Stable Diffusion para gerar quadrinhos com personagens consistentes e sequências longas de imagem para vídeo.
Modelo de mundo interativo e open source que gera cenas de jogo jogáveis a partir de quadros low-poly com renderização neural em streaming.