开发者从零训练泰米尔语 1.5B 模型,坦承翻车并将重构语料
lmoroney · x · 2026-10-12
Laurence Moroney 在互动中提及一个从零训练的泰米尔语(Tamil-first)模型项目:该模型拥有自己的 tokenizer,当前 1.5B 版本出现循环与胡言乱语的问题,作者坦诚公开了这一点,并计划在重做语料与合成数据后再尝试。Moroney 表示期待下周的下一版结果,并认为这种公开踩坑对从零训练模型的人很有参考价值。
所属事件:独立开发者从零训练泰米尔语模型失败后升级至2.5B并开源(3 条相关)→
「模型」频道最新
- 爆料称 Anthropic 正训练对标 OpenAI 内部模型的新模型 — imjustnewatai · 2026-10-23
- AI 研究者：Claude 替我完成了多年前放弃的繁琐研究任务 — MikePFrank · 2026-10-23
- Dream Labs 出 stealth:双手机器人基座模型 Dream-1,时租仅 3 美元 — scott_e_reed · 2026-10-23
- Claude 模型登陆 Google Cloud:Anthropic 托管版正式可用 — claudeai · 2026-10-23
- Beam 对战 GLM 5.3 去审查版：10 轮攻防修补 96% 漏洞 — bigblueboo · 2026-10-23
- GPT-6 网页版能真「听」音频，API 和 Codex 却不支持，用户实测揭秘 — Possible_Statement84 · 2026-10-23