1枚の画像から、メッシュファイルではなく、アニメーション対応のThree.js用TypeScriptコードでオブジェクトを再構築します。
lightningpixel/modly
ローカルGPUで動作するオープンソースAIモデルを使い、写真やテキストプロンプトから3Dメッシュを生成するデスクトップアプリです。
- スター
- 8,553
- フォーク
- 802
- 未解決の Issue
- 106
- 最終コミット
- 5 日前
これは何?
Modlyは、クラウドサービスではなく手元のGPUで動作するオープンソースAIモデルを使って、1枚の画像から3Dメッシュを生成するデスクトップアプリです。Windows、Linux、Apple Silicon搭載のmacOSに対応しています。
モデルは拡張機能システムから追加します。各拡張機能はmanifest.jsonを含むGitHubリポジトリで、URLを指定してアプリから直接インストールできます。公式拡張機能ではHunyuan3D 2(Mini、Turbo、Fast)、TripoSG、Trellis2 GGUFを利用できます。ワークフローはノードグラフで構築でき、たとえば「Image → Generate Mesh → Add to Scene」のようにつなげられます。読み込んだメッシュはアプリ内でスムージングやデシメーションが可能です。
また、標準ライブラリのみで構成されたPython CLIも提供しており、エージェントやスクリプトから起動中のデスクトップアプリに対して、ヘルスチェック、モデル一覧の取得、ワークフローの実行、メッシュのエクスポートを行えます。AMD GPUはLinuxとWindowsでROCm経由でサポートされています。
主な機能
- 01ローカルGPU上のオープンソースモデルを使い、画像から3Dメッシュを生成します。
- 02GitHubリポジトリのURLからモデル拡張機能を直接インストールできます。
- 03画像からメッシュを生成してシーンに追加するまでの処理をつなげられる、ノードベースのワークフローエディターを搭載しています。
- 04読み込んだメッシュをアプリ内でスムージング、デシメーションできます。
- 05起動中のModlyをスクリプトやエージェントから操作するためのPython CLIを提供します。
- 06LinuxとWindowsでROCm経由のAMD GPUに対応しています。
ユースケース
- 参考写真から、プロトタイピングやプリビズ用の簡易的な3Dメッシュをすばやく作成する。
- 画像をクラウドサービスに送信せず、オフラインで3Dアセットを生成する。
- CLI経由でスクリプトから画像からメッシュへの変換を一括実行する。
- 拡張機能を通じて、さまざまなオープンソースの3D生成モデルを試す。
クイックスタート
- 1
リポジトリをクローンする
- 2
JSの依存関係をインストールする
npm install - 3
Pythonバックエンドの環境をセットアップし、requirementsをインストールする
cd api && python -m venv .venv && pip install -r requirements.txt - 4
開発モードで実行する
npm run dev
使う前に知っておきたいこと
- Apple Silicon搭載のmacOSに対応しており、Intel Macには対応していません。
- メッシュの生成には十分な性能を持つローカルGPUが必要です。AMD GPUはLinuxおよびWindowsでROCm経由でサポートされています。
- ライセンスのメタデータは明確に検出できませんが、READMEにはMITと記載されています。
収録されている特集
トピック
よくある質問
- modly とは?
- ローカルGPUで動作するオープンソースAIモデルを使い、写真やテキストプロンプトから3Dメッシュを生成するデスクトップアプリです。 Modlyは、クラウドサービスではなく手元のGPUで動作するオープンソースAIモデルを使って、1枚の画像から3Dメッシュを生成するデスクトップアプリです。Windows、Linux、Apple Silicon搭載のmacOSに対応しています。
- modly は無料で使えますか?ライセンスは?
- modly は Other ライセンスのオープンソースです。商用製品で使う前にライセンス条件を確認してください。
- modly は今もメンテナンスされていますか?
- 活発にメンテナンス中。modly の最終コミットは 2026年11月1日 です。
- modly は何に使えますか?
- 参考写真から、プロトタイピングやプリビズ用の簡易的な3Dメッシュをすばやく作成する。 画像をクラウドサービスに送信せず、オフラインで3Dアセットを生成する。 CLI経由でスクリプトから画像からメッシュへの変換を一括実行する。 拡張機能を通じて、さまざまなオープンソースの3D生成モデルを試す。
- modly のインストール方法は?
- リポジトリをクローンする JSの依存関係をインストールする: npm install Pythonバックエンドの環境をセットアップし、requirementsをインストールする: cd api && python -m venv .venv && pip install -r requirements.txt 開発モードで実行する: npm run dev
- modly はどこで入手できますか?
- ソースコードとインストール手順は GitHub にあります:https://github.com/lightningpixel/modly
概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。
関連プロジェクト
Hunyuan3D 2.0/2.1の画像から3Dを生成するGradioアプリをまとめた、手動セットアップ不要のWindows向けポータブルパッケージ。
1枚の画像からベースカラー、メタリック、ラフネスのマップを備えた、再ライティング可能なテクスチャ付き3Dアセット(GLB)を生成し、既存メッシュへのテクスチャ適用にも対応します。
複数マシンの余剰GPU・CPUを1つのコントロールプレーンに集約し、AIワークロードを実行するオープンソースプラットフォームとPythonクライアント。
デスクトップ、サーバー、ブラウザクライアントから名前付きのAIチームメイトを動かせる、Grok Botのセルフホスト可能なオープンソース代替ソフト。
Godotは、統合エディターから2D・3Dゲームを制作できる、無料かつMITライセンスのクロスプラットフォームゲームエンジンです。