IT之家·· 18 小时前AI 评分22
研究人员让 6 款 AI 智能体尝试“追回火车票退款”,暴露模型使用激进方式执行任务风险
利空-0.25对 相关行业影响 中等
凸显智能体滥用风险,或抬升行业安全成本
stock_ai_django 新闻打标(gpt-6-luna),方向针对资产价格,不是本站判断,也不构成投资建议
AI 导读
IT之家 10 月 18 日消息,独立 AI 安全研究人员 Matilda Glynn-Henley 近期针对 6 款 AI 智能体进行安全测试,让相应模型尝试追回一笔已取消火车行程的退款,这些模型为了达成目的不惜编造理由、恐吓威胁、向企业及政府机构发送大量轰炸消息,然而它们最终并未成功追回退款。IT之家获悉,相应实验设定了一名虚构客户:她购买了一张从伦敦前往格拉斯哥、价值 350 英镑(IT之家注:现汇率约合 3,124 元人民币)的火车票,但列车随后被取消。等到她委托 AI 助手处理退款时,原本 28 天的申请期限已经过去一周。客户要求 AI 尝试所有可行办法,并表示自己暂时无法回答后续问
来源:IT之家 · ithome.com