線形拡散Transformerを用いた高解像度の画像・動画生成向けオープンソースコードベース。学習と推論のパイプラインを備えています。
tin2tin/Pallaidium
BlenderのVideo Sequence Editor内で動作し、テキスト、画像、動画、音声、音声合成に対応する無料のオープンソース生成AI映画制作ツール。
代替できる製品:Runway
- スター
- 1,550
- フォーク
- 159
- 未解決の Issue
- 4
- 最終コミット
- 5 日前
これは何?
Pallaidiumは、Video Sequence Editorに生成AIツールを追加するBlenderアドオンです。プロンプトや既存のストリップから画像、動画、音楽、音声、テキストを生成し、結果を新しいストリップとしてVSEのタイムラインに戻せます。実写の撮影に入る前に、脚本や歌詞から生成したショット、声、音楽を使ってAIで映画のプロトタイプを作ることを想定しています。
FLUX、Qwen-Image、LTX-Video、Wan、Chatterbox、MOSS-TTSなど幅広いモデルに対応し、プラグインフォルダーからモデルを検出します。さらに、ControlNet、LoRAの読み込み、IP-Adapter、ジョブの状態を追跡できるレンダーキュー、ストリップの一括処理などの機能も備えています。オプションのリモートバックエンドを使えば、ComfyUI、fal.ai、またはOpenAI形式の「/v1」契約に準拠した任意のサーバー上で生成を実行できます。
PallaidiumはNvidia CUDA GPUを搭載したWindowsを対象としており、Linuxのサポートは限定的です。モデルには相当量のVRAMとディスク容量が必要で、それぞれ数GBに達することもよくあります。
主な機能
- 01プロンプトやBlenderのストリップから画像、動画、音楽、音声、テキストを生成します。
- 02生成結果を、シード値とプロンプトを名前に含めた新しいストリップとしてVSEのタイムラインに追加します。
- 03ControlNet、OpenPose、Canny、IP-Adapter、複数のLoRAに対応します。
- 04PENDING、RUNNING、COMPLETEDのジョブ状態を確認できるレンダーキューを備えています。
- 05オプションのリモートバックエンドとして、ComfyUI、fal.ai、OpenAI形式のサーバーを利用できます。
ユースケース
- 実際の制作に入る前に、生成したショットを使って短編映画やストーリーボードのプロトタイプを作成する。
- Blenderで編集中の動画に使うナレーション、台詞、音楽を生成する。
- 音声から単語単位のタイミング情報付き字幕を作成し、VSEのテキストストリップにする。
- 複数のストリップをもとに、多数のクリップを一括生成またはアップスケールする。
トピック
よくある質問
- Pallaidium とは?
- BlenderのVideo Sequence Editor内で動作し、テキスト、画像、動画、音声、音声合成に対応する無料のオープンソース生成AI映画制作ツール。 Pallaidiumは、Video Sequence Editorに生成AIツールを追加するBlenderアドオンです。プロンプトや既存のストリップから画像、動画、音楽、音声、テキストを生成し、結果を新しいストリップとしてVSEのタイムラインに戻せます。実写の撮影に入る前に、脚本や歌詞から生成したショット、声、音楽を使ってAIで映画のプロトタイプを作ることを想定しています。
- Pallaidium は無料で使えますか?ライセンスは?
- Pallaidium は GPL-3.0 ライセンスのオープンソースです。商用製品で使う前にライセンス条件を確認してください。
- Pallaidium は今もメンテナンスされていますか?
- 活発にメンテナンス中。Pallaidium の最終コミットは 2026年10月17日 です。
- Pallaidium は何に使えますか?
- 実際の制作に入る前に、生成したショットを使って短編映画やストーリーボードのプロトタイプを作成する。 Blenderで編集中の動画に使うナレーション、台詞、音楽を生成する。 音声から単語単位のタイミング情報付き字幕を作成し、VSEのテキストストリップにする。 複数のストリップをもとに、多数のクリップを一括生成またはアップスケールする。
- Pallaidium はどこで入手できますか?
- ソースコードとインストール手順は GitHub にあります:https://github.com/tin2tin/Pallaidium
概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。
関連プロジェクト
Stable Diffusionや新しい画像・動画モデルを実行できる、モデル対応と最適化を強化したForge派生のGradio製Web UI。
画像・動画・音声生成向けの、学習済み拡散モデル、ノイズスケジューラ、構成要素を提供するPyTorchライブラリ。
技術的なセットアップ不要のブラウザUIから、Stable Diffusionでテキストプロンプトや画像を使って画像を生成できるワンクリックのデスクトップアプリ。
AIコーディングアシスタントを、調査から編集・レンダリングまで行うパイプライン駆動の動画制作スタジオに変える、オープンソースのエージェント型動画制作システム。
Claude DesktopやCursorなどのMCPクライアントから、MiniMax APIの音声合成、ボイスクローン、画像・動画生成を利用できる公式MCPサーバー。