OpenNMT / CTranslate2GitHubC++ 和 Python 推理库,通过量化和优化内核,更快、更省内存地运行 Whisper、Llama、NLLB 等 Transformer 模型。AI 与机器学习#inference#transformer-models#quantization#machine-translation#deep-learning4716547C++MIT更新于 昨天