CLI、Python、Android、Docker、またはOpenAI互換サーバーを通じて、Qualcomm SnapdragonデバイスのNPU、GPU、CPUでモデルを実行するオンデバイスLLM・VLM推論ランタイムです。
84501070GoBSD-3-Clause更新 47 分前
#snapdragon
snapdragon に関連する厳選 GitHub リポジトリ。AI による概要と主要な指標を掲載しています。
CLI、Python、Android、Docker、またはOpenAI互換サーバーを通じて、Qualcomm SnapdragonデバイスのNPU、GPU、CPUでモデルを実行するオンデバイスLLM・VLM推論ランタイムです。
Snapdragon NPUの高速化とCPU/GPUへのフォールバックに対応し、Stable Diffusionの画像生成を端末上で実行するAndroidアプリ。