将任意 Agent Skill 转换为 Harbor 格式、可用于强化学习的终端任务。
18518PythonApache-2.0更新于 18天前
Terminal-Bench 团队推出的框架,用于在容器环境中评估和优化智能体与语言模型。
Harbor 是一个用于评估和优化智能体与语言模型的框架。它可以让 Claude Code、OpenHands、Codex CLI 等智能体在容器环境中运行基准测试任务。
除了运行现有基准,用户还可以构建并分享自己的基准测试与运行环境。实验可以在大量环境中并行进行,既可以用 Docker 在本地运行,也可以通过参数切换到 Daytona、Modal 等云端沙箱服务。它是 Terminal-Bench-2.0 的官方评测工具,也支持运行 SWE-Bench 等第三方数据集。
此外,Harbor 还能为强化学习优化生成 rollout 数据。项目通过 uv 或 pip 安装为命令行工具。
使用 uv 安装 Harbor
uv tool install harbor或使用 pip 安装 Harbor
pip install harbor设置模型提供商的 API 密钥
export ANTHROPIC_API_KEY=<YOUR-KEY>使用 Docker 在本地运行 Terminal-Bench-2.0
harbor run --dataset terminal-bench@2.0 --agent claude-code --model anthropic/claude-opus-5-5 --n-concurrent 4概要由 AI 根据项目 README 生成;GitHub 数据每日更新。
将任意 Agent Skill 转换为 Harbor 格式、可用于强化学习的终端任务。
基于 Go 的斗地主游戏,支持联网对战、断线重连和智能机器人,发牌完全随机。
开源、可自托管的 AI 可观测性平台,用于追踪、评估和调试 LLM 应用与智能体。
ASPIRE 是一个让编码智能体迭代优化可复用机器人技能的框架,用于仿真与真机操作任务,而非训练模型权重。
跨平台的系统监控工具,可在终端或 Web 中查看 CPU、内存、磁盘、网络、进程和容器状态。
一个终端界面(TUI)工具,用于查看和控制 Docker 容器,可查看实时状态与日志。