AutoGPTは、自然文やビジュアルビルダーで複数ステップのワークフローをこなすAIエージェントを構築・実行・スケジュールできるオープンソースプラットフォームです。
instavm/clickclickclick
ローカルまたはリモートのモデルでUIタスクを計画・実行する、Androidとコンピューター操作向けの自律型フレームワーク。
- スター
- 714
- フォーク
- 87
- 未解決の Issue
- 3
- 最終コミット
- 7 か月前
これは何?
ClickClickClickは、LLMがAndroid端末やmacOSコンピューターを自律的に操作できるPythonフレームワークです。下書きメールの作成やGoogle Mapsでのバス停検索といった自然言語のタスクを受け取り、プランナーモデルで作業を手順に分解し、ファインダーモデルで操作対象となる画面上の要素を特定します。
Ollama経由のローカルモデル(Llama 3.2-visionやqwen3.5:4bなど)に加え、GeminiやOpenAI GPT-4oにも対応しています。プランナーとファインダーには別々のモデルを選択でき、小型モデルで処理を高速化するために画像品質を下げることもできます。コマンドラインツール、Python API、FastAPIベースのRESTエンドポイントから利用でき、Androidを操作するには、コードを実行するマシンにadbが必要です。
コードは非常に実験的で、活発に変更が加えられていると説明されています。そのため、本番環境での利用よりも、調査やプロトタイピングに適しています。
主な機能
- 01自然言語の指示からAndroidとmacOSのUIタスクを実行します。
- 02プランナーモデルとファインダーモデルを個別に選択できます。
- 03Ollama経由のローカルモデルに加え、GeminiとOpenAIに対応しています。
- 04CLI、Python API、RESTエンドポイントを利用できます。
- 05画像品質を調整して処理時間を短縮できます。
ユースケース
- LLM駆動のモバイルアプリ自動化をプロトタイピングする。
- プライベートなマシン上でローカルモデルを使ったエージェントの実験を行う。
- Android上のブラウザーやアプリで、繰り返し作業を自動化する。
- macOSでコンピューター操作エージェントを試す。
トピック
よくある質問
- clickclickclick とは?
- ローカルまたはリモートのモデルでUIタスクを計画・実行する、Androidとコンピューター操作向けの自律型フレームワーク。 ClickClickClickは、LLMがAndroid端末やmacOSコンピューターを自律的に操作できるPythonフレームワークです。下書きメールの作成やGoogle Mapsでのバス停検索といった自然言語のタスクを受け取り、プランナーモデルで作業を手順に分解し、ファインダーモデルで操作対象となる画面上の要素を特定します。
- clickclickclick は無料で使えますか?ライセンスは?
- clickclickclick は MIT ライセンスのオープンソースです。商用製品で使う前にライセンス条件を確認してください。
- clickclickclick は今もメンテナンスされていますか?
- 半年以上コミットなし。clickclickclick の最終コミットは 2026年3月17日 です。
- clickclickclick は何に使えますか?
- LLM駆動のモバイルアプリ自動化をプロトタイピングする。 プライベートなマシン上でローカルモデルを使ったエージェントの実験を行う。 Android上のブラウザーやアプリで、繰り返し作業を自動化する。 macOSでコンピューター操作エージェントを試す。
- clickclickclick はどこで入手できますか?
- ソースコードとインストール手順は GitHub にあります:https://github.com/instavm/clickclickclick
概要はプロジェクトの README をもとに AI が生成しています。GitHub の数値は毎日更新されます。
関連プロジェクト
エージェントプラットフォームの構築、APIでのエージェント提供、Web UIでの管理を実現するPythonフレームワークとランタイム。
LLMが実際のブラウザを操作するAIエージェント向けのOSS Pythonライブラリ。ホスト型のクラウドブラウザとエージェントAPIも利用可能。
サポートエージェントからブラウザー・コンピューター操作エージェントまで、Claude API上でデプロイ可能なアプリを構築するためのスタータープロジェクト集。
LLMとグラフベースのパイプラインを使い、自然言語の指示からWebサイトやローカル文書の構造化データを抽出するPythonライブラリ。
Claude Code、Cursor、Gemini CLIなどに導入できる、幅広い職種のAIエージェント用プロンプト集。