OpenAI 官方开源的高速 BPE 分词器,专为 GPT 系列模型设计,能快速把文本切成 token,适合训练和推理时做文本预处理。
封装百度千帆大模型平台能力的 SDK,提供对话、向量化、重排和微调等 LMOps 最佳实践,让开发者便捷接入文心一言等模型服务。
把 TensorFlow、PyTorch、Caffe、ONNX 等模型一键转成飞桨格式,省去跨框架迁移时重写网络和权重的麻烦。
把 scikit-learn 训练好的模型和 Pipeline 转成 ONNX 格式,方便跨框架部署和推理加速。