一站式大模型训练框架,支持 600+ 纯文本大模型和 300+ 多模态大模型的 CPT、SFT、DPO、GRPO 等训练,可用 LoRA 等 PEFT 方式或全参数微调。
用 GRPO 强化学习给多步 Agent 做在线训练,让 Qwen、Llama 等模型在真实任务里边干边学,提升实际表现。
把 AI 研究与工程技能打包成可复用模块,接入 Claude Code、Codex、Gemini 等编码代理后即可获得完整科研能力。
用强化学习训练 Transformer 语言模型的全流程库,覆盖 SFT、奖励建模到 PPO/DPO 等 RLHF 算法,省去自己拼训练管线。
用强化学习(GRPO)训练视觉语言模型做视觉理解,把 DeepSeek-R1 那套推理强化思路搬到多模态场景,适合研究 VLM 推理能力。
面向大模型后训练的强化学习框架,用混合编程模型把 RLHF 训练流程编排得灵活又高效,方便扩展和跑大规模实验。
一站式搞定 Qwen、Gemma 等开源大模型和多模态模型的微调(SFT/RL)、评测与部署,零代码也能上手。
用 ChatGPT 同款流程训练医疗大模型,覆盖增量预训练、有监督微调、RLHF、DPO、ORPO、GRPO 全链路,开箱即可复现。
一份面向 AI Agent 开发与大模型求职的系统指南,覆盖上下文工程、高级 RAG、MCP、Agentic RL 和 LangGraph 实战,并附 1.2 万+ 面试题。
基于 Ray 的高性能 RLHF 训练框架,支持 PPO、DAPO、REINFORCE++ 等算法与 vLLM 推理加速,可扩展地完成大模型和视觉语言模型的对齐后训练。
从下载数据到生成文本,手把手教你从零训练自己的大语言模型,适合想搞懂 LLM 训练全流程的开发者动手实践。
从零开始手把手教你构建 LLM 智能体的中文教程,覆盖 Agent 原理、RAG 等核心实践,适合入门与动手复现。
一站式大模型微调工具,支持 LoRA、QLoRA、全参等多种训练方式,用配置文件就能跑起各种开源模型的微调任务。
从零开始手把手教你构建大模型的开源教程,覆盖预训练、微调、RAG 与 Agent 等关键环节,适合想系统入门 LLM 原理与实践的开发者。
一套统一接口搞定 100+ 大语言模型和多模态模型的微调,支持 LoRA 等高效训练方式,省去为每个模型单独写训练脚本的麻烦。
…r reinforcement learning at scale. On synchronous GRPO with Qwen3.5-35B-A3B on two 8× B300 nodes, a step takes 0.137 s per 1k response tokens against Miles v0.1.3's 0.176
…0 以支持 GKDTrainer Notes - OPD v1 为独立训练链路,不改动现有 PPO/GRPO 主流程 - 训练产物与 SFT/LoRA 一样可独立部署或合并后部署
…ining.py ORPO(比值比偏好优化)— training/orpo training.py GRPO(群组相对策略优化)— training/grpo training.py DeepSpeed ZeRO-3 MoE 支持 针对 MoE 架构模型(Qwen3 MoE、Qwen3.5 MoE),在所有训练脚本中自动检测并设置 set
GRPO、RF++ ready
…17) Chat - Merge pull request 6208 from hpcaitech/grpo dev by [YeAnbang](https://api.github.com/users/YeAnbang) Pre-commit.ci - [pre-commit.ci] auto fixes from pre-commit
v2.4.0 1. 新增GRPO训练方法,GRPO通过纯RL方法可以体验 aha moment ,https://github.com/shibing624/MedicalGPT/blob/main/run grpo.sh 2. 支持了 DeepSeek-V3, [DeepSeek-R1](https://huggingface.co/d