基于 Viterbi 算法的日语分词器,用 Rust 实现,适合需要高性能形态素分析的 NLP 场景。
…: API 兼容无行为变化, 新增韩语等 17 种语言的原生分句规则 (此前韩语回退英语规则), 长文本分割速度大幅提升 Changes - Incremental ASR sentence segmentation switched from PySBD to yasbd-lib ( 37): API-compatible with n