多模态 AI 讲座要点
pliang279 · x · 2026-07-17
这条转发总结了 Oxford Machine Learning School 上一场关于 **Multimodal AI** 的讲座。 讲座内容分成三部分： - **什么是多模态 AI**：处理的是异构、彼此关联、会交互的数据，而不只是单一文本。 - **为什么难**：核心技术挑战包括表示、对齐、推理、生成、迁移和量化。 - **下一步是什么**：重点走向多模态基础模型，以及把 LLM 扩展到多模态生成。 讲者还提到其团队在新模态上的研究，比如： - **触觉**：OpenTouch、触觉传感手套 - **嗅觉**：SmellNet、AromaGen - 以及面向“自我演化多模态”的后续方向