基于 PyTorch 的轻量级 NLP 框架,几行代码就能完成命名实体识别、词性标注、语义角色标注等序列标注任务的训练与微调。
面向波斯语(Farsi)的 Python NLP 工具包,提供文本归一化、分词、词性标注、依存句法分析、词形还原和词向量等完整处理流程。
面向商务场景的日语形态素分析器,能对日文文本做分词和词性标注,适合需要稳定处理业务文档的 Java 项目。
纯 Go 编写的独立日语形态素分析器,无需外部词典即可完成分词与词性标注,适合在 Go 服务里直接集成日文 NLP 能力。
用 Rust 重写的日语形态素分析器,也是新一代 SudachiPy 的底层实现,提供分词和词性标注,比原版更快、更省内存。
基于 HMM 与熵率计算的快速中文分词与词性标注工具,用 Java 实现,适合需要轻量级 NLP 解析的工程场景。
Sudachi 日语分词器配套的系统词典,提供词条和词性标注数据,用于日文形态素分析和分词。