triton-inference-server / serverGitHub开源推理服务器,通过 HTTP/REST 和 gRPC 部署 TensorRT、PyTorch、ONNX 等多种框架的模型。AI 与机器学习#inference#deep-learning#model-serving#gpu#onnx1.1万1861PythonBSD-3-Clause更新于 7小时前