用 ALT 标签解决 AI 回复配图不相关问题,LukeW 分享实测改进
LukeW · x · 2026-09-21
Luke Wroblewski 分享他个人 AI 应用 Ask LukeW 的一项改进:AI 应用爱生成大段文字,内嵌相关图片能显著改善体验,但系统中图片很少被选入回复。排查发现,摄取管线中 AI 生成的图片标题描述过于笼统(如"绿色块布局对比"),导致检索时图文相关性判断失准。
他的做法:
- 摄取管线对每张上传图片用 AI 生成标题与描述,并各自转为 embedding,支持语义+关键词双重检索。
- 关键技巧是利用不起眼的 ALT 标签写清图片的实际用途与语境,大幅提升了图片被检索和选入回复的相关性。
- 对比显示,带相关图片的回答明显更受欢迎。
「编程与Agent」频道最新
- Thorsten Ball 断言:代码评审将死,单元测试也难逃一劫 — rseroter · 2026-09-22
- Tinfield 1 开源发布:177B 参数终端编码模型自称超越 Claude Opus 4.8 — victormustar · 2026-09-22
- LangChain 推出决策模型 SemIf：结构化分类免费开放 — LangChain · 2026-09-22
- Qwen Code Desktop v0.24.3 发布:新增钉钉输出、bwrap 沙箱等更新 — github-actions[bot] · 2026-09-22
- Chris Ré 组：智能体接管抽象层，CUDA DSL 该退休了 — ricklamers · 2026-09-22
- 马斯克晒多智能体工作流：Grok Bot 统筹 Claude Code 与 Codex — elonmusk · 2026-09-22