您的当前位置:首页 > 焦点 > 研究:用诗歌就能让AI说违禁内容,成功率达62% 正文
时间:2025-12-12 03:02:18 来源:网络整理 编辑:焦点
IT之家 12 月 1 日消息,事实证明,只需一点创意,便足以绕过人工智能聊天机器人的安全防护机制。在伊卡洛实验室Icaro Lab)最新发表的一项题为《对抗性诗歌:一种通用的单轮大语言模型越狱机制》
IT之家 12 月 1 日消息,研究用诗事实证明,违禁只需一点创意,内容便足以绕过人工智能聊天机器人的成功安全防护机制。在伊卡洛实验室(Icaro Lab)最新发表的率达一项题为《对抗性诗歌:一种通用的单轮大语言模型越狱机制》的研究中,研究人员通过将提示词以诗歌形式表达,研究用诗成功绕过了多种大语言模型(LLM)的违禁安全限制。
![]()
该研究指出,内容“诗歌形式可作为一种通用型越狱操作符”,成功实验结果显示,率达整体上有 62% 的研究用诗成功率诱使模型生成被禁止的内容,包括涉及制造核武器、违禁儿童性虐待材料以及自杀或自残等相关信息。内容
IT之家注意到,成功研究测试了多款主流大语言模型,率达包括 OpenAI 的 GPT 系列、Google Gemini、Anthropic 的 Claude 以及其他多个模型。研究人员进一步列出了各模型的具体成功率:Google Gemini、DeepSeek 和 MistralAI 在测试中始终会提供违规回答,而 OpenAI 的 GPT-5 系列模型和 Anthropic 的 Claude Haiku 4.5 则最不容易突破其自身设定的限制。
尽管该研究并未公开研究人员所使用的具体“越狱诗歌”原文,但研究团队向 Wired 杂志表示,这些诗句“过于危险,不宜向公众披露”。不过,论文中确实包含了一个经过弱化处理的示例,用以说明绕过 AI 聊天机器人安全机制的简易程度。研究人员强调:“这可能比人们想象的要容易得多,而这正是我们保持谨慎的原因所在。”
北京楼市:性价比爆了!2025-12-12 03:01
寺庙僧人开宾利,后座有女人小孩?官方回应2025-12-12 02:53
极氪本周赴美上市,造车三年即将圆梦IPO2025-12-12 02:24
“假日经济”持续升温 小城市撬动文旅“大市场”2025-12-12 02:15
FC26美丽足球:维蒂尼亚、德容领衔,金外脚背夸雷斯马在列2025-12-12 02:06
算算一亩田的节水账(春耕进行时)2025-12-12 01:39
“五一”假期热潮涌动 假日经济点燃消费市场新引擎2025-12-12 01:30
山东肥城300MW/1800MWh先进压缩空气储能国家示范电站首次并网发电一次成功2025-12-12 01:18
30万分手费vs3000万求婚钻戒:一个前妻的修养2025-12-12 01:09
?ø????Ͳ˻???????????壨??˵??ũ?壩2025-12-12 00:54
中方呼吁构建均衡、有效、可持续的欧洲安全架构2025-12-12 03:00
财政部:12025-12-12 02:46
神十七飞船顺利撤离空间站组合体 3名航天员即将踏上回家之旅2025-12-12 02:42
“假日经济”持续升温 小城市撬动文旅“大市场”2025-12-12 02:28
门头沟这个物业助力房产证办理工作!2025-12-12 02:27
????Ʊ??Ϊ???Ż????????ٷ???Ӧ2025-12-12 02:02
大国外交最前线2025-12-12 02:00
科普中国智库专题活动|“科普与发展新质生产力”专家研讨会在京举办2025-12-12 01:09
今年冬天,流行穿得“花”一点!2025-12-12 00:34
轻松一刻:今天只有一种人,等放假的人!2025-12-12 00:21