Biblioteca de tokenización rápida y de vanguardia escrita en Rust, con bindings para Python y Node.js, para pipelines de NLP y modelos de lenguaje.
11,2 mil1,2 milRustApache-2.0Actualizado hace 11 horas
#wordpiece
Proyectos open source sobre «wordpiece»
Repositorios de GitHub seleccionados relacionados con wordpiece, con resúmenes de IA y métricas clave.
Ordenar:Añadidos recientemente
1 repositorio