GPT-OSS-20B 思考链默认英文:AWS 实测微调后多语言推理修复

AWS ML Blog · rss · 2026-10-21

AWS ML Blog 发布在 SageMaker HyperPod 上微调 GPT-OSS-20B 实现多语言推理的完整教程。

问题:GPT-OSS-20B 的思维链几乎只用英文。在 50 例多语言测试中,基础模型仅 22% 按要求语言推理(英语 100%,法语/西语 0%,德语 10%,意语 0%)。

核心结论:SFT vs GRPO 怎么选

技术栈:SageMaker HyperPod + EKS 编排,SFT/GRPO 用 PyTorch TRL,对照实验换 veRL + Ray + vLLM,存储用 FSx for Lustre,节点互联走 EFA,全程 LoRA 参数高效微调。

GitHub 仓库 awsome-distributed-ai 提供全部命令、K8s 清单与脚本,可照跑。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →