Repolode
instavm

instavm/clickclickclick

자연어 작업을 바탕으로 플래너와 파인더 LLM이 휴대폰과 데스크톱을 조작하는 프레임워크입니다.

스타
714
포크
87
열린 이슈
3
마지막 커밋
7개월 전

어떤 프로젝트인가요?

ClickClickClick은 LLM이 Android 기기나 컴퓨터를 조작해 일반적인 문장으로 설명된 작업을 수행하도록 하는 Python 프레임워크입니다. 예를 들어 Gmail에서 이메일 초안을 작성하거나 Lichess에서 게임을 시작할 수 있습니다. 작업은 다음 단계를 결정하는 플래너 모델과 상호작용할 화면 요소를 찾는 파인더 모델로 나뉘며, Android에는 ADB를, 데스크톱에는 macOS 타깃을 사용합니다.

Ollama를 통한 로컬 모델(Llama 3.2-vision, qwen3.5:4b 등)은 물론 Gemini와 OpenAI의 호스팅 모델도 지원하며, 모델은 config/models.yaml에서 설정합니다. CLI, Gradio 웹 인터페이스, Python API 또는 uvicorn으로 실행하는 REST 엔드포인트를 통해 작업을 실행할 수 있습니다.

프로젝트는 실험성이 매우 높다고 명시되어 있으며, 작성자들은 지금까지 Gemini 3.1 Flash-Lite를 플래너와 파인더로 모두 사용했을 때 가장 좋은 결과를 얻었다고 설명합니다. Android 작업을 실행하려면 코드를 실행하는 머신에 adb가 설치되어 있어야 합니다.

핵심 기능

  • 01LLM 플래너가 작업을 단계별로 나누고 파인더가 UI 요소를 찾습니다.
  • 02Ollama를 통한 로컬 모델과 Gemini 및 OpenAI 모델을 지원합니다.
  • 03ADB로 Android 기기를, macOS 데스크톱을 조작합니다.
  • 04CLI, Gradio 웹 UI, Python API 및 REST 엔드포인트를 제공합니다.
  • 05정확도와 속도의 균형을 맞추도록 이미지 품질을 조정할 수 있습니다.

활용 사례

  • 메시지 전송이나 앱 실행 같은 반복적인 휴대폰 작업을 자동화합니다.
  • 로컬 오픈 모델을 사용하는 컴퓨터 조작 에이전트를 실험합니다.
  • Android 또는 macOS에서 LLM 기반 UI 자동화를 프로토타이핑합니다.
  • 다른 도구에서 사용할 수 있도록 기기 자동화를 HTTP 서비스로 제공합니다.

토픽

자주 묻는 질문

clickclickclick은(는) 무엇인가요?
자연어 작업을 바탕으로 플래너와 파인더 LLM이 휴대폰과 데스크톱을 조작하는 프레임워크입니다. ClickClickClick은 LLM이 Android 기기나 컴퓨터를 조작해 일반적인 문장으로 설명된 작업을 수행하도록 하는 Python 프레임워크입니다. 예를 들어 Gmail에서 이메일 초안을 작성하거나 Lichess에서 게임을 시작할 수 있습니다. 작업은 다음 단계를 결정하는 플래너 모델과 상호작용할 화면 요소를 찾는 파인더 모델로 나뉘며, Android에는 ADB를, 데스크톱에는 macOS 타깃을 사용합니다.
clickclickclick은(는) 무료로 사용할 수 있나요? 라이선스는 무엇인가요?
clickclickclick은(는) MIT 라이선스의 오픈소스입니다. 상업용 제품에 사용하기 전에 라이선스 조건을 확인하세요.
clickclickclick은(는) 아직 유지보수되고 있나요?
6개월 이상 커밋 없음. clickclickclick의 마지막 커밋은 2026년 3월 17일입니다.
clickclickclick은(는) 어디에 사용할 수 있나요?
메시지 전송이나 앱 실행 같은 반복적인 휴대폰 작업을 자동화합니다. 로컬 오픈 모델을 사용하는 컴퓨터 조작 에이전트를 실험합니다. Android 또는 macOS에서 LLM 기반 UI 자동화를 프로토타이핑합니다. 다른 도구에서 사용할 수 있도록 기기 자동화를 HTTP 서비스로 제공합니다.
clickclickclick은(는) 어디서 받을 수 있나요?
소스 코드와 설치 방법은 GitHub에 있습니다: https://github.com/instavm/clickclickclick

요약은 프로젝트 README를 바탕으로 AI가 작성했습니다. GitHub 통계는 매일 갱신됩니다.

관련 프로젝트