开发者用深度强化学习造出虚拟蠕虫,涌现类动物神经结构
开发者 neuroecology 在业余时间构建了一套「虚拟动物」生态模拟系统并分多步展示了成果:每只虚拟蠕虫由独立的神经网络控制,需要从不同食物中摄取足够的蛋白质、碳水化合物和脂质,营养结构直接影响生存;器官会向神经网络发送神经调质来引导决策;蠕虫还需躲避同样自带神经网络的捕食者,并与同类互动。作者最初只训练了觅食、产卵等少数行为。
已确认
- 系统基于深度强化学习训练,使用了 jsuarez 开发的 PufferLib 框架;neuroecology 与 jsuarez 就「用 deepRL 建模演化与社会行为」有过讨论,认为这类方法能研究其他建模方式难以触及的问题。
- 训练后的智能体神经动力学呈现出「类动物」的神经系统结构:出现了专门负责转向的个体指令神经元(command neurons),感觉神经元也自发分化出不同功能类型。
- 捕食者同样由神经网络驱动,形成了一个多方博弈的模拟环境。
为什么重要
- 作者指出,即便在很简单的进化/训练设置下,神经网络在环境压力下也会自发组织出类似真实动物神经系统的结构,这为研究神经演化、行为涌现提供了低成本的可复现实验平台。
- 该工作展示了 deepRL + PufferLib 在生物行为建模上的潜力,触及传统建模方法难以处理的问题,如营养代谢约束下的觅食策略与捕食-反捕食协同演化。
2026-11-21 ~ 2026-11-21 · 5 条相关
- 第 1 集:开发者用深度强化学习造出虚拟蠕虫,涌现类动物神经结构(2026-11-21,5 条)
- 第 2 集:神经生态学探索:用可解释性工具审视深度强化学习虚拟动物(2026-11-21,2 条)
一手来源
- 开发者自制虚拟动物:神经网络驱动的觅食、伪装与生存模拟 — neuroecology ·
- 用 PufferLib 深度强化学习训练出类神经元结构的智能体 — neuroecology ·
- 虚拟蠕虫涌现类动物神经结构:转向指令神经元、功能分型感觉神经元 — neuroecology ·
- 【源头】开发者自制虚拟动物:神经网络驱动的觅食、伪装与生存模拟 — neuroecology · 2026-11-21
- 开发者业余复现觅食研究:虚拟蠕虫用神经网络学会觅食、产卵和躲避天敌 — neuroecology · 2026-11-21
- 【源头】虚拟蠕虫涌现类动物神经结构:转向指令神经元、功能分型感觉神经元 — neuroecology · 2026-11-21
- 【源头】用 PufferLib 深度强化学习训练出类神经元结构的智能体 — neuroecology · 2026-11-21
- 研究者:deepRL 配 PufferLib 可模拟演化与社会行为 — neuroecology · 2026-11-21