Biblioteca de tokenización rápida y de vanguardia escrita en Rust, con bindings para Python y Node.js, para pipelines de NLP y modelos de lenguaje.
11,2 mil1,2 milRustApache-2.0Actualizado hace 10 horas
#bpe
Proyectos open source sobre «bpe»
Repositorios de GitHub seleccionados relacionados con bpe, con resúmenes de IA y métricas clave.
Ordenar:Añadidos recientemente
1 repositorio