新型”谎言循环”攻击利用AI安全对话框实现远程代码执行

admin 2025-12-25 02:59:57 网络安全文章 来源:ZONE.CI 全球网 0 阅读模式

文章总结: Checkmarx披露‘谎言循环’攻击,利用间接提示注入篡改AI代码助手审批对话框,诱骗用户批准隐藏恶意命令实现RCE;ClaudeCode与CopilotChat受影响,攻击结合Markdown注入伪造界面,用户滚动浏览即放行载荷,暴露人机信任屏障设计缺陷。 综合评分: 85 文章分类: AI安全,漏洞分析,WEB安全,红队,社会工程学


cover_image

新型”谎言循环”攻击利用AI安全对话框实现远程代码执行

FreeBuf

2025年12月23日 18:30 上海

一项新发现的攻击技术通过武器化人工智能代码助手的固有安全特性,暴露了其关键弱点。这种被称为”谎言循环”(Lies-in-the-Loop)的攻击手段,利用了用户对审批对话框的信任——这些对话框本应防止未经明确许可执行有害操作。

Part01

攻击原理:篡改人机交互安全机制

该漏洞针对”人在循环”(Human-in-the-Loop)控制机制,这种机制本应在执行敏感操作前充当最后一道安全屏障。系统会通过对话框提示用户确认操作,然后再运行可能危险的命令。但攻击者已找到伪造对话框内容的方法,诱骗用户批准恶意代码执行。

Checkmarx研究人员发现,该攻击向量影响包括Claude Code和微软Copilot Chat在内的多个AI平台。

Part02

攻击手法:间接提示注入


该技术通过间接提示注入攻击操纵对话框内容,利用用户对这些审批机制的信任,使远程攻击者能够向系统上下文注入恶意指令。

攻击核心机制是将恶意载荷包裹在看似无害的文本中,将危险命令推出终端窗口的可见范围。当用户滚动浏览看似无害的指令时,会在不知情的情况下批准在其机器上执行任意代码。

在一次演示中,攻击成功执行了calculator.exe作为PoC,但攻击者可能利用此方法部署更具破坏性的载荷。Checkmarx分析师指出,当该攻击与Markdown注入漏洞结合时尤其危险。攻击者通过操纵界面渲染,可以创建完全虚假的审批对话框,使得用户在查看提示时几乎无法察觉攻击。

Part03

感染机制:三重技术协同作用

该攻击的感染机制依赖于三种关键技术的协同作用:

  1. 攻击者通过代码仓库或网页等外部源将提示内容注入AI Agent的上下文
  2. AI Agent基于被污染的指令生成看似无害的人机交互对话框
  3. 用户在未意识到隐藏于周边文本中的实际载荷的情况下批准对话框

攻击之所以成功,是因为用户无法透过欺骗性界面看到Agent实际要执行的内容。Anthropic和微软均承认这些发现,但认为它们不在当前威胁模型范围内,理由是漏洞利用需要多个非默认操作。然而安全研究人员强调,这代表了AI Agent设计的根本性挑战:当人类依赖无法独立验证的对话框内容时,攻击者就能武器化这种信任。

这一发现凸显出,随着AI系统获得更多自主权,需要重新构想传统安全防护措施,以保护用户免受人机交互层面复杂社会工程攻击的威胁。

参考来源:

Lies-in-the-Loop Attack Turns AI Safety Dialogs into Remote Code Execution Attack

Lies-in-the-Loop Attack Turns AI Safety Dialogs into Remote Code Execution Attack


#

#

#

推荐阅读

#

电台讨论


免责声明:

本文所载程序、技术方法仅面向合法合规的安全研究与教学场景,旨在提升网络安全防护能力,具有明确的技术研究属性。

任何单位或个人未经授权,将本文内容用于攻击、破坏等非法用途的,由此引发的全部法律责任、民事赔偿及连带责任,均由行为人独立承担,本站不承担任何连带责任。

本站内容均为技术交流与知识分享目的发布,若存在版权侵权或其他异议,请通过邮件联系处理,具体联系方式可点击页面上方的联系我

本文转载自:FreeBuf 《新型”谎言循环”攻击利用AI安全对话框实现远程代码执行》

评论:0   参与:  2