网友分享:把语义特征权重控制在 -1 到 1 可避免生成混乱
cephaloform · x · 2026-09-16
作者分享了一个实验性技巧:操纵模型语义特征(semantic feature)时,权重应保持在 -1 到 1 的范围内,否则生成结果会混乱。
作者还介绍了一种「诗意」的玩法:把特征权重视为对语言解释能力的探索,甚至可以手动做简易「RLHF」——随机给每个权重 ±0.1 的更新,生成后对比效果,变好就保留更新,变差就取反。
所属事件:开发者用纸笔级多项式拟合与马尔可夫链玩转语义建模(5 条相关)→
「研究」频道最新
- 多智能体 RL 后训练破解 LLM 模式坍缩,提升回答多样性 — natashajaques · 2026-09-16
- 观点:世界模型到不了 AGI,持续学习才是最后也是最难的一块拼图 — Intelligent-Cream-14 · 2026-09-16
- 哲学家新书附录论证:为何可确信当下 LLM 并无意识 — AnnaCiaunica · 2026-09-16
- 普林斯顿造出光可编程「可擦写」超薄半导体,仅数分子厚 — MengdiWang10 · 2026-09-16
- ICML 2026 Oral:黎曼度量匹配让扩散几何估计快 400 倍 — allen_ai · 2026-09-16
- 655k 论文提取 600 万科学贡献,EMNLP 论文发布科学贡献图谱数据集 — mmbronstein · 2026-09-16