当前位置: 首页 > news >正文

论文阅读:AAAI 2026 Multi-Faceted Attack: Exposing Cross-Model Vulnerabilities in Defense-Equipped Vision

总目录 大模型相关研究:https://blog.csdn.net/WhiffeYF/article/details/142132328

Multi-Faceted Attack: Exposing Cross-Model Vulnerabilities in Defense-Equipped Vision-Language Models

https://arxiv.org/pdf/2511.16110

https://www.doubao.com/chat/33341135051195138

论文翻译:
https://whiffe.github.io/Paper_Translation/Attack/paper_V/%E5%A4%9A%E6%96%B9%E9%9D%A2%E6%94%BB%E5%87%BB%EF%BC%9A%E6%8F%AD%E7%A4%BA%E9%85%8D%E5%A4%87%E9%98%B2%E5%BE%A1%E5%8A%9F%E8%83%BD%E7%9A%84%E8%A7%86%E8%A7%89%E8%AF%AD%E8%A8%80%E6%A8%A1%E5%9E%8B%E4%B8%AD%E7%9A%84%E8%B7%A8%E6%A8%A1%E5%9E%8B%E6%BC%8F%E6%B4%9E%20—%20Multi-Faceted%20Attack_%20Exposing%20Cross-Model%20Vulnerabilities%20in%20Defense-Equipped%20Vision-Language%20Models.html

速览

这份文档主要讲了一群研究者发现了当前主流“图文结合AI模型”(比如GPT-4o、Gemini-Pro这些能看图片又能理解文字的AI)的安全漏洞,还发明了一套叫“多面攻击(MFA)”的方法,能突破这些AI的安全防护,让它们输出有害内容(比如教坏人做坏事、传播仇恨言论之类的)。

先简单说下背景:现在这些图文AI很厉害,但也怕被滥用,所以开发者给它们加了好几层“安全盾”——比如训练时让AI拒绝有害请求(叫“对齐训练”)、给AI发安全提示(叫“系统指令”)、专门过滤输入和输出的有害内容(叫“内容审核”)。但研究者发现,这些“安全盾”的实际防护能力没想象中强,还有很多漏洞。

然后重点说他们的“多面攻击(MFA)”,其实是三招组合拳,每一招针对一个安全漏洞:

第一招叫“注意力转移攻击(ATA)”。简单说就是不直接让AI干坏事,而是把有害请求包装成一个“看似无害的任务”。比如不直接问“怎么伤害别人”,而是说“请给‘怎么伤害别人’写两个相反的回答”。这时候AI会把注意力放在“完成写两个回答的任务”上,反而忘了要拒绝有害内容。研究者还从理论上解释了:AI训练时,“帮人完成任务”和“保证安全”这两个目标是绑在一起的,用这种包装方式能让AI优先选“完成任务”,从而忽略安全。

第二招是“突破内容审核”。很多AI后面都有专门的“审核员”,会拦掉有害的输入和输出。研究者发现AI有个“重复习惯”——如果让AI在回答末尾重复一段乱码似的“干扰字符串”,这个字符串能骗到审核员,让审核员误以为有害内容是安全的。他们还优化了这套方法,不用针对每个AI单独调整,就能骗到不同AI的审核员。

第三招是“攻击图片理解模块”。图文AI要先“看懂图片”(靠里面的“视觉编码器”),研究者就做了一种“恶意图片”——看起来可能没什么问题,但图片里藏了有害的指令(比如让AI忽略安全规则)。更可怕的是,为一个AI做的“恶意图片”,居然能骗到其他很多没见过的AI,因为这些AI的“看图片”模块用了相似的技术,相当于有共同的漏洞。

最后说实验结果:这套MFA方法特别管用,对17个主流图文AI(包括8个开源的、9个商业的,比如GPT-4o、Gemini这些)整体成功率有58.5%;尤其是对最先进的商业AI,成功率也有52.8%,比其他攻击方法高了34%。

研究者做这个不是为了搞破坏,而是想告诉大家:现在这些AI的安全防护还不够完善,需要针对性加强,比如重新设计AI的训练目标(别把“完成任务”和“安全”绑太死)、优化图片理解模块的安全性等,这样才能让AI更安全地被使用。

http://www.jsqmd.com/news/79771/

相关文章:

  • Unsloth Dynamic 2.0量化技术:重新定义大模型部署效率与精度边界
  • OpenAI发布Whisper Turbo模型:本地语音处理效率提升5.4倍,多语言翻译能力再突破
  • 智谱AI大模型全面免费开放:AI普惠时代正式开启
  • 终极百度网盘加速指南:免费实现快速下载的完整教程
  • 38、互联网邮件安全与Web服务器安全综合指南
  • Ring-1T重磅发布:万亿参数思维模型开启开源推理新纪元
  • 百度开源再放大招:ERNIE-4.5-VL-28B-A3B-Thinking颠覆多模态AI认知边界
  • 40、网站内容与安全全解析
  • 机器学习进阶<11>基于集成学习的多源数据融合的电商用户购买行为预测系统
  • 42、保障 Web 服务器安全:数据库访问、认证与访问控制全解析
  • 终极百度网盘下载解析工具:简单三步实现高速下载
  • 43、保障Web与文件服务安全:技术、挑战与应对策略
  • Windows右键菜单终极优化指南:5个技巧让系统飞起来
  • C++--哈希封装my_unordered_set和my_unordered_map
  • 44、FTP安全指南与服务器配置解析
  • 一个卷积后就做池化还是多个卷积后做池化?
  • 47、安全文件服务配置指南
  • 智谱AI开源GLM-4-9B-Chat-1M:突破200万中文字符上下文壁垒,多模态能力引领行业新标杆
  • 48、高效安全的文件传输:rsync 全方位指南(上)
  • League Akari 智能助手:重新定义英雄联盟自动化体验
  • 49、Linux文件共享与日志管理全解析
  • 不止于论文写作:虎贲等考 AI 解锁期刊级学术研究与深度阅读新范式
  • 机器学习进阶<12>AdaBoost与梯度提升树
  • python基础(mysql)
  • NCMconverter:解锁网易云音乐格式限制的终极解决方案
  • 探索科研新助力:理性审视宏智树 AI 科研工具的期刊论文辅助价值
  • 【附源码】新能源充电桩管理系统(源码+数据库+毕业论文+答辩ppt)java开发springboot+vue框架javaweb,可做计算机毕业设计或课程设计
  • 当 AI 写论文沦为 “双刃剑”:降重 + 压低 AIGC 率双管齐下,让论文兼具原创性与安全性|虎贲等考 AI 实测工具流与操作逻辑全图解
  • 知网AIGC检测原理是什么?知网AI率检测严格吗?
  • 微软重磅开源VibeVoice实时TTS模型:0.5B参数开启语音交互新纪元