Yacine 分享妙招:训练探针读取 mingru 隐状态检验域随机化覆盖度

yacineMTB · x · 2026-11-05

Yacine MTB 在与 jsuarez 讨论机器人学习时分享了一个技巧:可以训练一个探针(probe)去预测模拟器参数,从而用 mingru 模型的隐藏状态判断域随机化是否覆盖了真实世界。他进一步提出,智能体在探索时会遇到「没见过」的经验,应该有办法量化神经网络对当前状态「见过多少」。

这个思路的核心是:与其盲目加大随机化范围,不如从模型内部表征反推分布覆盖情况,用隐状态探针来指导仿真参数设计。