面向大模型推理与智能体训练的大规模异步强化学习系统,支持通过替换 base_url 对黑盒智能体做在线 RL 训练。
5855634PythonApache-2.0更新于 3小时前
#sglang
与 sglang 相关的精选 GitHub 开源仓库,附 AI 中文概要与关键数据。
面向大模型推理与智能体训练的大规模异步强化学习系统,支持通过替换 base_url 对黑盒智能体做在线 RL 训练。
用 Rust 编写的引擎无关 LLM 网关,将兼容 OpenAI 和 Anthropic 的请求分发到自部署推理引擎与云端模型服务。