Sentdex:多模态 LLM 零训练操控机器人,VLA 或只是插曲
Sentdex · x · 2026-10-09
知名 AI 创作者 Sentdex 分享了一个零训练机器人实验:仅靠多模态 LLM(DSV4.1F)+ prompt,用从未见过的相机、电机和从未测试过的机身形态完成任务,当前速度很慢(视频 10 倍速)但他确信可加速。核心观点:
- 机器人 demos 的通病是依赖完美光照、固定摆放物体,一到真实环境就崩,因为每个部署都是独特边缘情况;而这个方案不依赖训练数据或 sim2real。
- 他认为 ACT、VLA 等专用机器人训练路线可能只是被通用模型顺手吃掉的「支线剧情」。
- 例外是底层技能(步态、抓取等):RL 仍是王者,需要模型快且小,且更安全。
- Clef、Jev 等决策模型对机器人目前基本没用。
所属事件:Sentdex 演示多模态 LLM 零训练操控机器人(2 条相关)→
「漫话AGI」频道最新
- 前沿模型首次在财报预测上跑赢人类专家共识 — maithra_raghu · 2026-10-09
- NEJM AI 社论:AI 冲击下的科学思考力,谁来当有准备的人 — zakkohane · 2026-10-09
- 社科研究者:可 fork 的 GitHub 仓库才算数,数学界还远没醒 — RexDouglass · 2026-10-09
- Ethan Mollick 重提 2005 年黑客史研究:类比今日 AI 攻击工具扩散 — emollick · 2026-10-09
- 哲学思想实验:若外星人串行处理信息,我们还会认为它们有意识吗 — eschwitz · 2026-10-09
- Ben Recht 批判不确定性量化:95% 场景只剩高斯误差条 — beenwrekt · 2026-10-09