技術的なセットアップ不要のブラウザUIから、Stable Diffusionでテキストプロンプトや画像を使って画像を生成できるワンクリックのデスクトップアプリ。
Tencent-Hunyuan/HunyuanDiT
中国語と英語のプロンプトを理解する、Tencent製のオープンソース二言語対応テキスト画像生成拡散トランスフォーマーです。
代替できる製品:Midjourney
DALL-E 3
- スター
- 4,290
- フォーク
- 365
- 未解決の Issue
- 124
- 最終コミット
- 14 日前
これは何?
Hunyuan-DiTは、Transformerアーキテクチャを採用し、潜在空間で動作するテキスト画像生成モデルです。事前学習済みVAEで画像を圧縮し、二言語対応CLIPと多言語T5テキストエンコーダーでプロンプトを処理します。中国語と英語の両方を細かく理解できるよう設計されており、複数の出力解像度に対応しています。
リポジトリには、PyTorchによるモデル定義、事前学習済み重み(v1.0〜v1.2と蒸留版)、コマンドライン、GradioのWeb UI、Hugging Face Diffusers向けの推論スクリプトが含まれています。また、全パラメーターおよびLoRAの学習コード、ControlNetとIP-Adapterのサポート、ComfyUIおよびKohyaとの連携機能も備えています。
さらに、複数ターンのテキスト画像生成対話に対応するマルチモーダルなプロンプト拡張モデルDialogGenと、学習データのキャプションを付け直すHunyuan-Captionerも含まれています。推論にはCUDA対応のNVIDIA GPUが必要で、GPUメモリは最低約11GBが目安です。Diffusersを使った6GB向けの推論方法も用意されています。
主な機能
- 01テキスト画像生成において、中国語と英語のプロンプトを理解します。
- 02複数解像度での学習により、さまざまな画像解像度に対応します。
- 03LoRAおよび全パラメーターの学習スクリプトを提供します。
- 04ControlNet(canny、pose、depth)とIP-Adapterに対応しています。
- 05プロンプト拡張モデルDialogGenにより、複数ターンのテキスト画像生成対話を実現します。
- 06Hugging Face Diffusers、ComfyUI、Kohyaと連携できます。
ユースケース
- クリエイティブ制作やデザインで、中国語のプロンプトから画像を生成する。
- LoRAを使って、独自のスタイルに合わせてテキスト画像生成モデルをファインチューニングする。
- poseやdepthなどのControlNet条件を使って、制御可能な画像生成を行う。
- 付属のGradioデモをベースに、複数ターンで画像を作成できるアシスタントを構築する。
クイックスタート
- 1
Tencent Hunyuan Botを使って、ブラウザーでモデルを試す
- 2
READMEにあるLinux向けインストールガイドに従う
- 3
READMEの説明に従って、事前学習済みモデルをダウンロードする
使う前に知っておきたいこと
- READMEのインストールガイドはLinux向けです。
- ローカルで推論を実行するには高性能なNVIDIA GPUが必要です。READMEにはVRAM 6GBの選択肢も記載されています。
- メタデータではライセンスが明確に示されていません(NOASSERTION)。商用利用の前にライセンス条件を確認してください。
トピック
よくある質問
- HunyuanDiT とは?
- 中国語と英語のプロンプトを理解する、Tencent製のオープンソース二言語対応テキスト画像生成拡散トランスフォーマーです。 Hunyuan-DiTは、Transformerアーキテクチャを採用し、潜在空間で動作するテキスト画像生成モデルです。事前学習済みVAEで画像を圧縮し、二言語対応CLIPと多言語T5テキストエンコーダーでプロンプトを処理します。中国語と英語の両方を細かく理解できるよう設計されており、複数の出力解像度に対応しています。
- HunyuanDiT は無料で使えますか?ライセンスは?
- HunyuanDiT は Other ライセンスのオープンソースです。商用製品で使う前にライセンス条件を確認してください。
- HunyuanDiT は今もメンテナンスされていますか?
- 活発にメンテナンス中。HunyuanDiT の最終コミットは 2026年10月8日 です。
- HunyuanDiT は何に使えますか?
- クリエイティブ制作やデザインで、中国語のプロンプトから画像を生成する。 LoRAを使って、独自のスタイルに合わせてテキスト画像生成モデルをファインチューニングする。 poseやdepthなどのControlNet条件を使って、制御可能な画像生成を行う。 付属のGradioデモをベースに、複数ターンで画像を作成できるアシスタントを構築する。
- HunyuanDiT のインストール方法は?
- Tencent Hunyuan Botを使って、ブラウザーでモデルを試す READMEにあるLinux向けインストールガイドに従う READMEの説明に従って、事前学習済みモデルをダウンロードする
- HunyuanDiT はどこで入手できますか?
- ソースコードとインストール手順は GitHub にあります:https://github.com/Tencent-Hunyuan/HunyuanDiT
概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。
関連プロジェクト
画像・動画・音声生成向けの、学習済み拡散モデル、ノイズスケジューラ、構成要素を提供するPyTorchライブラリ。
Stable Diffusionや新しい画像・動画モデルを実行できる、モデル対応と最適化を強化したForge派生のGradio製Web UI。
量子化なしで、レイヤー単位に大規模言語モデルを実行し、70Bクラスのモデルを4GB GPU 1枚で推論できるPythonライブラリ。
テキスト・画像・音声からの動画生成やキャラクターアニメーションに対応した、大規模なオープンソース動画生成モデル。
参照画像とキーボードやマウスの入力から、操作可能なゲーム風動画を生成するオープンソースモデル。