研究者发现 Mythos 激活方向与基因组语言模型惊人相似

jatin_n0 · x · 2026-09-24

研究者 Joseph Kellogg 观察到 Mythos 模型的激活中存在与基因组语言模型（如 ESM 类 pLM/gLM）行为方向相似的 feature，jatinn0 提出假说：足够大、且预训练含序列数据的 LLM 可能自发学到耦合信号与 motif 类特征。
斯坦福研究者 Anshul Kundaje 在讨论中补充：他曾尝试用 Claude/GPT 辅助标注 DNA motif（其生物学功能与结合对象），开箱效果很差；但这更像一个多模态推理任务，LLM 加以训练后有望打通基因组序列注释的重大瓶颈——目前该任务仍依赖极其繁琐的人工标注，团队正在积累足够的标注数据。
该发现也可能解释为何部分 Claude 模型能识别 ART arrays 而另一些不能。

「模型」频道最新