独立开发者从零训练泰米尔语模型失败后升级至2.5B并开源

独立开发者Mechramc公开其自研泰米尔语优先模型Agaram的进展:该模型配备专属tokenizer,从零开始训练。1.5B版本效果不佳,出现回答停不下来、反复循环、胡言乱语等问题,作者坦承失败并濒临放弃。经过重写语料和引入合成数据后,模型已扩展至2.5B,计划下周开源。Lucas Moroney和Laurence Moroney等业内人士肯定了作者坦诚公开失败经历的做法,认为这种透明分享对社区有参考价值。

2026-10-10 ~ 2026-10-12 · 3 条相关