只需 Python 基础,就能跟着 Jupyter Notebook 从零手写 GLM4、Llama3、RWKV6 等大语言模型,边写代码边吃透模型原理。
…://github.com/linkedin/Liger-Kernel/pull/1493 fix(glm4v): version-aware hidden size/vocab size for Glm4vConfig by @1fanwang in https://github.com/linkedin/Liger-Kernel/pu
…语言模型。 - 支持 Kimi-K2.6。 - 向后兼容 Qwen3-Coder-Next-FP8、GLM4.7-FP8。 - 进一步优化 DeepSeek-V3.2 及类似模型中的稀疏 attention。 - 优化 Qwen3-Next 和 Qwen3.5 模型开启 MTP 时的性能。 - 面向前缀缓存优化 DP 路由策略。 - 优化
…l 微调训练 - 新增多种模型的 tool format 适配与解析逻辑,覆盖 default 、 glm4 、 llama3 、 mistral 、 qwen - 补充 data/sft/glaive toolcall zh demo.jsonl 等 tool-call 数据样例 - 统一本地训练数据为 .jsonl ,并将 SFT /
✨ Enhancements - Support glm4.5 models ( 2867) - feat: add BurnCloud as new AI model provider ( 2890) - feat(benchmark): Support Falcon Text2SQL Datasets LLM benchmark( 2
…ts Fixed some errors for gemma2, DeepSeek-V2, ChatGLM4, llama 3.1, T5, TriLMs, BitNet models Fixed some other errors
…4odoo 2525 - 支持 Gemini 在线模型 by @yhfgyyf 2630 - 支持 GLM4 在线模型 by @zRzRzRzRzRzRzR - elasticsearch更新https连接 by @xldistance 2390 - 增强对PPT、DOC知识库文件的OCR识别 by @596192804 2013 - 更