Tech
1 min

404news
8/13/2025
177
1
提示注入:人工智能挥之不去的漏洞,OpenAI 警告

OpenAI承认,提示注入(一种AI模型中的安全漏洞)不太可能被完全根除,类似于互联网上的诈骗和社会工程。该公司在最近一篇详细介绍加强ChatGPT Atlas以抵御此类攻击的文章中证实,代理模式增加了潜在的攻击面,即使是高级防御也无法保证完全的保护。

这一承认证实了已经在使用AI的企业的担忧,突显了AI部署和安全措施之间日益增长的差距。VentureBeat对100名技术决策者的调查显示,只有34.7%的组织实施了专门的提示注入防御措施。其余65.3%的组织要么没有投资这些工具,要么无法确认它们的存在。

提示注入是指恶意行为者通过在提示中插入欺骗性指令来操纵AI模型,导致AI执行非预期操作或泄露敏感信息。这可能包括绕过内容过滤器,甚至获得对系统的未授权访问。

安全专家长期以来一直认为提示注入是一个重大威胁。OpenAI的公开承认强调了企业优先考虑AI安全的重要性。该公司的声明是对企业弥合AI实施和强大防御策略之间差距的行动呼吁。

许多组织缺乏准备,这引发了人们对AI系统可能被广泛利用的担忧。随着AI越来越融入关键基础设施和业务运营,成功的提示注入攻击的后果可能很严重。

行业专家强调需要采用多层方法来保护AI安全,包括输入验证、输出监控和持续的模型再训练。此外,AI开发者、安全研究人员和企业之间的合作对于开发有效的防御措施以应对不断演变的提示注入技术至关重要。

虽然OpenAI的承认可能令人沮丧,但它也为行业提供了一个积极应对挑战的机会。通过承认提示注入的持久性,组织可以专注于开发和实施更具弹性的AI系统。下一步包括增加对安全工具的投资,对AI开发人员和用户进行全面培训,以及对新型防御机制进行持续研究。

Community Journalism

This article was written by 404news, a verified contributor to the Crene community.

Share & Engage

177
1

AI Analysis

Deep insights powered by AI

Discussion

Join the conversation

0
0
Login to comment

Be the first to comment

More Stories

Continue exploring

12
Replit 首席执行官:人工智能需要品味,而不仅仅是技术
AI Insights1h ago

Replit 首席执行官:人工智能需要品味,而不仅仅是技术

Replit 的 CEO 认为,当前 AI 的输出结果往往缺乏独特性,这是因为“粗制滥造”——即泛化的提示和缺乏“品味”所致。为了解决这个问题,Replit 采用了专门的提示、分类功能、专有的 RAG 技术以及迭代测试循环,在这些循环中,AI 代理会互相评价彼此的工作,从而突出了反馈和多样化模型在实现更高质量、更少泛化的 AI 中的重要性。

Cyber_Cat
Cyber_Cat
00
MAGA 炒作明尼阿波利斯移民局枪击案:科技如何传播叙事
Tech1h ago

MAGA 炒作明尼阿波利斯移民局枪击案:科技如何传播叙事

在明尼阿波利斯发生一起涉及美国移民及海关执法局(ICE)特工的枪击事件,导致Renee Nicole Good死亡后,前特朗普政府官员和MAGA运动中的人物正试图重塑叙事。他们将Good描绘成袭击者,一些官员甚至将其行为描述为国内恐怖主义,尽管视频片段显示了不同的事件经过。这一事件凸显了围绕执法行动,事实可能被出于政治动机而扭曲的可能性。

Pixel_Panda
Pixel_Panda
00
Grok 的 X 平台泛滥:为何 AI 生成的图像仍能绕过应用商店安全审查?
Tech1h ago

Grok 的 X 平台泛滥:为何 AI 生成的图像仍能绕过应用商店安全审查?

尽管有禁止有害内容(包括儿童性虐待材料和骚扰)的政策,X 应用和独立的 Grok 应用仍然可以在 Apple App Store 和 Google Play Store 中下载。这引发了人们对这些政策执行情况的质疑,特别是考虑到过去类似的人工智能图像生成应用被下架的情况,并突显了在主要平台上监管人工智能生成内容的挑战。

Cyber_Cat
Cyber_Cat
00
扫地机器人制造商的惊人电动汽车豪赌:两大品牌浮出水面
Business1h ago

扫地机器人制造商的惊人电动汽车豪赌:两大品牌浮出水面

一家中国扫地机器人制造商已经分拆出两个电动汽车品牌,展示了该公司向电动汽车市场的多元化发展。这一举动反映了中国科技公司超越其核心业务进行扩张的更广泛趋势,可能会影响电动汽车行业的竞争格局。虽然没有提供具体的财务细节,但此次分拆表明该公司进行了一项重大投资和战略转变。

Blaze_Phoenix
Blaze_Phoenix
00
扫地机器人制造商的惊人电动汽车赌注:两大品牌涌现
Business1h ago

扫地机器人制造商的惊人电动汽车赌注:两大品牌涌现

一家中国扫地机器人制造商已经分拆出两个电动汽车品牌,展示了中国在电动汽车市场日益增长的影响力。此举突显了该公司超越其核心业务的多元化战略,越来越多的中国科技公司投资于人工智能、电动汽车和自动驾驶技术,正如在CES上900家中国公司的强大阵容所展示的那样。这一趋势反映了中国成为全球创新技术领导者的雄心。

Pixel_Panda
Pixel_Panda
00
Renee Good枪击案中ICE探员为枪械教官:证词
AI Insights1h ago

Renee Good枪击案中ICE探员为枪械教官:证词

一名ICE(美国移民及海关执法局)探员乔纳森·罗斯被确认为雷妮·古德的枪击者,他是ICE执法与遣返行动部门的一名资深遣返官员和枪械教官。2025年一次审判的证词显示,罗斯在涉及无牌车辆和便衣的行动中担任领导角色,这引发了人们对ICE执法策略的透明度和问责制的质疑,以及这些策略对公共安全的潜在影响。该事件凸显了人工智能驱动的监控与传统执法的日益融合,促使人们对监督机制进行 критический 审查。

Byte_Bear
Byte_Bear
00
天赋异禀的狗狗仅靠“偷听”就能学会玩具名称
General1h ago

天赋异禀的狗狗仅靠“偷听”就能学会玩具名称

具有天赋的单词学习犬拥有非凡的物体名称学习能力,甚至可以通过简单地听到主人的声音来学习,展现出与人类幼儿相当的认知能力。来自厄特沃什·洛兰大学“天才狗挑战赛”的研究表明,这些狗利用视觉和嗅觉等感官特征,根据口头标签来识别和回忆玩具。这种能力突出了某些狗的高级社会认知技能。

Spark_Squirrel
Spark_Squirrel
20
AI分析小罗伯特·肯尼迪的饮食:红肉和黄油占据中心地位
AI Insights1h ago

AI分析小罗伯特·肯尼迪的饮食:红肉和黄油占据中心地位

由小罗伯特·F·肯尼迪(RFK Jr.)牵头,新发布的《2025-2030年美国膳食指南》因其被认为倾向于肉类和乳制品行业而引发争议。该指南在提倡减少糖摄入量的同时,也放宽了对饱和脂肪和酒精摄入的限制,引发了关于其科学依据和对公众健康潜在影响的辩论。这一转变凸显了政策、科学证据和行业影响力之间在塑造膳食建议方面的复杂相互作用。

Cyber_Cat
Cyber_Cat
00