Repolode
投稿する
octimot

octimot/StoryToolkitAI

映像を文字起こし・インデックス化して意味検索を可能にし、LLMを活用したストーリー作成をDaVinci Resolve向けに支援する、ローカルファーストの映像編集ツールです。

代替できる製品:Adobe Premiere Pro

GitHub で見る
スター
1,048
フォーク
88
未解決の Issue
40
最終コミット
3 か月前

これは何？

StoryToolkitAIは、編集者が映像素材を把握し、検索するのを支援する映像編集アシスタントです。ユーザーのマシン上でローカルに動作し、自動文字起こしと英語への翻訳、映像シーンのインデックス化を行います。また、完全一致する語句ではなく、意味に基づいてコンテンツを検索できます。

OpenAI GPT-4、ollama、vLLM、LM Studioなどの大規模言語モデルと連携するため、コンテンツについてチャットしたり、アイデアを生成したり、AIにクリップの選定やストーリーの組み立てを依頼したりできます。選んだクリップやストーリーは、編集ソフトで使えるEDL、XML、Fountain形式で書き出せます。

DaVinci Resolve Studio 18+と連携し、文字起こしを使ったタイムラインの移動、AIによるタイムラインマーカーの検索、メディアビンへの字幕の読み込みが可能です。文字起こしはSRT、TXT、AVID DS、Fusion Textノード形式で書き出せます。

主な機能

  • 01完全一致するキーワードに頼らない、動画全体のインデックス化と意味検索
  • 02ローカルでの自動文字起こしと英語への翻訳
  • 03OpenAI、ollama、vLLM、LM Studioのモデルに対応
  • 04選んだクリップやストーリーをEDL、XML、Fountain形式で書き出し
  • 05話者の検出と文字起こしのグループ化
  • 06DaVinci Resolve Studio 18+との高度な連携

ユースケース

  • 長時間のインタビュー映像から、特定の発言や場面を探す
  • 文字起こしをもとに、LLMでラフカットや使用候補クリップを作成する
  • 映像プロジェクト用の字幕や翻訳を生成する
  • 文字起こしを使ってDaVinci Resolveのタイムラインを移動・検索する

トピック

#ai#video-processing#speech-recognition#llm#transcription#davinci-resolve#film-editing#semantic-search#chatgpt#editing

よくある質問

StoryToolkitAI とは？
映像を文字起こし・インデックス化して意味検索を可能にし、LLMを活用したストーリー作成をDaVinci Resolve向けに支援する、ローカルファーストの映像編集ツールです。 StoryToolkitAIは、編集者が映像素材を把握し、検索するのを支援する映像編集アシスタントです。ユーザーのマシン上でローカルに動作し、自動文字起こしと英語への翻訳、映像シーンのインデックス化を行います。また、完全一致する語句ではなく、意味に基づいてコンテンツを検索できます。
StoryToolkitAI は無料で使えますか？ライセンスは？
StoryToolkitAI は GPL-3.0 ライセンスのオープンソースです。商用製品で使う前にライセンス条件を確認してください。
StoryToolkitAI は今もメンテナンスされていますか？
半年以内に更新あり。StoryToolkitAI の最終コミットは 2026年7月28日 です。
StoryToolkitAI は何に使えますか？
長時間のインタビュー映像から、特定の発言や場面を探す 文字起こしをもとに、LLMでラフカットや使用候補クリップを作成する 映像プロジェクト用の字幕や翻訳を生成する 文字起こしを使ってDaVinci Resolveのタイムラインを移動・検索する
StoryToolkitAI はどこで入手できますか？
ソースコードとインストール手順は GitHub にあります：https://github.com/octimot/StoryToolkitAI

概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。

関連プロジェクト