Select Language

AI社区

数据要素产业

人工智能面临的十大安全威胁

近日,应欧盟和美国政府的要求,可信AI研究和咨询专业公司Adversa发表了业界首个全面的人工智能安全性和可信度研究报告,该报告还结合了Gartner的相关预测以及最近对AI的对抗性攻击事件。

Adversa顾问委员会前Gartner分析师Oliver Rochford指出:建立对机器学习安全性的信任至关重要。我们要求人们去相信AI的黑匣子(这很困难),为了使AI革命成功,我们必须建立信任……AI面临的安全风险太大,同时收益也很大。

Adversa的CTO Eugene Neelou表示:“为了提高可信AI领域的安全意识,一年多前我们启动了一个项目,以分析学术、行业和政府过去十年的发展情况。结果令人目瞪口呆,受测AI系统普遍存在安全性和偏差问题,以及缺乏适当的防御措施,但人们对AI安全的兴趣呈指数增长。企业应紧密跟踪最新AI威胁,实施AI安全意识计划,并保护其AI开发生命周期,最重要的是从现在开始做起。”

报告显示:

AI领域的安全现状异常糟糕;

过去两年AI安全研究论文呈现爆炸式增长;

美国、中国、欧洲在可信AI研究领域竞争激烈,中国正在加速反超;

AI人工智能领域面临十大安全威胁。

以下为报告中的部分亮点数据,整理如下:

现实中的AI安全事件正在快速增长;

在汽车、生物识别、机器人技术和互联网行业中,现实世界中的AI安全事件正在快速增长。作为AI的早期采用者,最受关注的行业是互联网(23%)、网络安全(17%)、生物识别技术(16%)和自治(13%)。

AI安全研究论文爆炸式增长;

过去两年中,政府、学术界和工业界发布的AI安全性方面的研究论文多达3500篇,超过过去二十年的总和。美国、中国、欧盟之间的激烈竞争预计将在可信AI竞赛中继续下去:美国发表了47%的研究论文,但中国势头强劲。

AI还没有为黑客攻击做好准备;

人工智能行业对于现实世界的黑客攻击还没有做好充分的准备,60种最常用的机器学习(ML)模型平均至少有一个安全漏洞。

最多被攻击者针对的AI技术领域是计算机视觉;

最多被针对的AI领域是计算机视觉(65%),其次是分析、语言和自治系统。

图像、文本和记录是最容易遭受攻击的AI数据集;

图像分类和人脸识别最常被攻击的AI应用;

互联网、网络安全、生物识别和汽车行业是AI网络安全问题的重灾区

AI面临十大安全威胁

绕过攻击(通过对抗性样本操纵AI决策和结果)81%

毒化攻击(注入恶意数据降低AI系统可靠性和精确度)6.8%

推断攻击(推断特定数据样本是否被用于AI训练)3.5%

后门攻击2.3%

模型抽取攻击(通过恶意查询命令暴露AI算法细节)1.9%

归属推断攻击1.3%

木马攻击1.2%

模型逆转攻击(通过恶意查询获取的公共输出数据推断输入数据)1.2%

反水印攻击(绕过AI系统对版权和真实性的检测)0.6%

重编程攻击(改变AI模型用于非法用途)0.2%

仙女都在看

点点点,赞和在看都在这儿!