kalomaze:两位同行撞上多模态墙后,他改观了「借 SSL 特征」一事
kalomaze · x · 2026-09-21
开源模型圈知名开发者 kalomaze 表示,他原本持一种观点——「直接挪用 SSL(自监督学习)骨干特征来搭自己的模型很 lame,不如让模型用纯数据端到端地学会所需的东西」——但在看到自己两位同行在尝试端到端路线时先后撞上多模态(multimodal)的墙之后,他改观了。这条短评反映了开源多模态模型研发中「纯数据端到端 vs. 复用预训练骨干」路线之争的现实教训。
所属事件:开发者称多模态训练难以绕开自监督主干特征(4 条相关)→
「模型」频道最新
- 两年前 sam 说智能将廉价到忽略不计,如今 10/50 美元成新常态 — teortaxesTex · 2026-09-21
- Gary Marcus:所谓通用模型一旦分布外就现原形 — GaryMarcus · 2026-09-21
- AI 编造乘客中间名,险些让人上不了飞机 — menhguin · 2026-09-21
- Qwen3.8-35B-A3B 蒸馏版 GGUF 量化模型登上 HF 热榜 — empero-ai · 2026-09-21
- 用户怒批 OpenAI Codex 重置机制:付费却不知限额何时恢复 — StewartalsopIII · 2026-09-21
- 开源模型仅占全球 AI 推理支出 10%,网友预期一年内将变盘 — sarahookr · 2026-09-21