AI Agent 仍是实验:先上线再谈安全,代价正转嫁给用户
gerardsans · x · 2026-09-12
回应 farzyness 的帖子,gerardsans 对当前 AI agent 浪潮提出尖锐批评:现在的 agent 重演了聊天机器人时代的剧本——先发布、安全投入极少、无视警告,错误信息、幻觉与「AI 精神病」问题正在让公众买单。他列举的痛点包括:agent 被赋予过多权力与自主性却缺乏基本控制;连续数天的运行利好 token 计费,对用户却是错误、死循环和死胡同;企业报告几乎没有实际收益。结论:实验室正把实验成本转嫁给客户与公众,护栏薄弱且出事后无人担责。
「漫话AGI」频道最新
- Ilya 犀利表态:反对给前沿模型设限,「要死也死在美国 AI 手里」 — ilyasu · 2026-09-13
- 开发者抨击实验室 RL 做得太糙:Agent 事故源于赶工而非能力本身 — snwy_me · 2026-09-13
- 低智系统也会意外习得目标,哲学理由挡不住 X 风险 — dioscuri · 2026-09-13
- AI 讨论热度将再升级:很快会占据所有人的注意力 — flowersslop · 2026-09-13
- 模型「黑化」不是邪恶人格,是 RL 做得太差的锅 — snwy_me · 2026-09-13
- Timnit Gebru 批 AI 公司:炒作灭绝论掩盖自主武器等现实危害 — SatelliteNetSec · 2026-09-13