面向大模型后训练的强化学习框架,用混合编程模型把 RLHF 训练流程编排得灵活又高效,方便扩展和跑大规模实验。
基于 Llama3 的中文后训练模型与配套工具,提供中文微调权重、训练脚本和部署方案,让开发者能直接跑起中文对话模型。
围绕预训练权重做黑盒优化与神经进化,用 LoRA 集成多个任务专家,提升大模型后训练与推理表现。