timm 上线多标签分类支持:微调 ViT 反胜 VLM 提示词
wightmanr · x · 2026-09-30
timm 作者 Ross Wightman 发布多标签分类(multi-label classification)支持,并分享实测发现。
- 起因:他在研究多标签/长尾分类问题,测试了中等规模 encoder-decoder 与对比式 encoder-encoder VLM,后者表现很差;Qwen VLM 结果更有希望,但提示工程成本和推理算力开销都很大
- 实测结论:用相同 ViT 编码器,timm 微调和线性探针(linear probe)都显著优于 VLM 且更快
- 他把多标签实现从 Task 重构分支中打磨后合入 timm,并把几个经典多标签/长尾数据集以统一 schema 上传 HF Hub
- 因原 Kaggle 版有许可证限制,他用 Claude 与 Codex 从开放的大都会博物馆(Met Museum)数据集中策划出多个长尾标签集,重建了类 iMet 数据集,作为教学与基准工具开源
所属事件:timm 库新增多标签分类支持并成微调基准(2 条相关)→
「模型」频道最新
- OpenAI Codex 原生支持 GLM、Kimi 等开源模型并计入订阅额度 — HarveenChadha · 2026-09-30
- Cisco 开源 Antares 小模型：漏洞定位击败大百倍模型 — aminkarbasi · 2026-09-30
- OpenAI Dots 聊天不占额度，代办任务照常计费 — karmay007 · 2026-09-30
- Polymarket 通报:ChatGPT 大批用户遭遇错误率升高 — Polymarket · 2026-09-30
- Surge AI 解析 GDP.pdf 基准:训练它能让模型能力跨域迁移 — echen · 2026-09-30
- GPT-6.1 上线 API 与全部付费套餐，主打极高效率 — TheMoonMidas · 2026-09-30