跳到正文
OpenReview · Representation learning· Jiawei Lian; Jianhong Pan; Lefan Wang; Yi Wang; Shaohui Mei; Lap-Pui Chau·· 2025-09-19精选AI 评分75

针对已对齐大语言模型的语义表示攻击

Semantic Representation Attack against Aligned Large Language Models

AI 导读

基于摘要分析。本文研究已对齐 Large Language Models(LLMs)的对抗提示攻击,提出以语义表示而非精确肯定回复作为攻击目标,并给出 Semantic Representation Heuristic Search(SRHS),旨在兼顾攻击有效性、提示自然性与计算效率。 核心机制是把目标从特定文本模式转向具有等价有害含义的多样回复所对应的语义表示空间。作者称,SRHS 在增量搜索过程中保持提示的语义连贯性与可解释性,并为语义收敛提供理论保证。摘要未交代语义表示的构造方式、搜索操作、目标函数、模型访问权限,以及理论结论依赖的假设,这些均尚未验证。 结果方面,作者报告,在所评估的 18 个 LLMs 上平均攻击成功率为 89.4%,其中 11 个模型达到 100%;作者还报告计算需求显著降低,并在实验中持续优于现有方法。上述数字仅适用于作者所述评估范围;模型名单、攻击任务与样本构成、成功判定标准、平均方式、查询或计算预算及对照基线尚未验证,不能据此推断对任意模型或实际部署环境均有效。实验协议、消融及统计信息尚未验证。 本文的主要对象是 LLM 对齐安全,并非 EEG 表征学习或 BCI 解码。现有摘要未提供可对应 EEG 瓶颈的独立迁移机制,不据此生成 BCI 有效性结论或迁移实验建议。复现其原领域结果前,需要核对全文中的语义目标定义、搜索约束、评估协议与实现条件;代码及模型资源可用性尚未验证。

阅读价值

值得关注其将攻击目标从精确文本匹配转向语义表示的机制,以及搜索效率与提示自然性的权衡,但攻击成功率、理论保证的适用条件及比较公平性仍需全文核对。

来源:OpenReview · Representation learning · openreview.net