双字节小模型早期训练输出爆笑:代码学得一塌糊涂
kalomaze · x · 2026-10-24
AI 圈开发者 kalomaze 分享用纯代码数据训练微型非 BPE 模型(词表 65536、双字节 token)的早期收敛输出:模型生成的「代码」语法混乱、变量名诡异,看起来让人像「中风」一样摸不着头脑。配图展示了类似 fiskingCallremember = outp(vhi) 这样的混乱输出,是观察小模型训练早期状态的真实趣味样本。
「Fun」频道最新
- Dario 前物理老师爆料:学生时代就属「末日论阵营」,曾怕 Y2K 酿灾 — Polymarket · 2026-10-25
- Figma 预告神秘新品 afterimage，主打视觉与音效设计 — floguo · 2026-10-25
- David K:问 ChatGPT 我说过最蠢的话，答案是把 TypeScript 移植成 CSS — DavidKPiano · 2026-10-25
- AI 梗图：「The Eagle」把 Khabib 变成半人半鹰摔进 UFC 八角笼 — egeberkina · 2026-10-25
- 「为什么跑 DSv4.1？」「为了让它把自己调快」——DeepSeek 自优化补丁玩梗 — TheZachMueller · 2026-10-25
- 知名投资人发「内裤收集三步走」梗图调侃创业商业计划 — StewartalsopIII · 2026-10-25