b4rtaz / distributed-llamaGitHub一个 C++ 工具,通过以太网把 LLM 推理拆分到多台家用设备上,以加快生成速度。AI 与机器学习#llm-inference#distributed-computing#tensor-parallelism#llama#cpp3115258C++MIT更新于 11天前