人工智能应用面临7大数据安全威胁

VSole2022-12-14 09:59:36

自动驾驶技术、智能助理、人脸识别、智能工厂、智慧城市等人工智能技术现已广泛落地,这些令人难以置信的技术正在快速改变我们的生活。但相关领域安全事件也在快速增加,这使得研究人员和使用者对人工智能的安全性担忧不断提高。人工智能应用带来的红利和其引发的安全隐患,犹如一个硬币的两面,需要全行业高度关注并找到有效的应对方法。

日前,安全研究人员梳理总结了目前人工智能技术在实践应用中经常要面对的7个数据安全威胁。

威胁1 模型中毒

模型中毒(Model poisoning)是一种对抗性攻击形式,旨在操纵机器学习模型的结果。威胁行为者可以尝试向模型中注入恶意数据,进而导致模型对数据进行错误分类并做出错误的决策。例如,工程图像可以欺骗机器学习模型,将它们分类到与人类最初分类不同的类别中(例如,将猫的图像标记为老鼠)。研究发现,这是一种欺骗AI系统的有效方法,因为在输出之前,不可能判断特定的输入是否会导致错误的预测。

为了防止恶意行为者篡改模型输入,企业组织应该实施严格的访问管理策略来限制对训练数据的访问。

威胁2 隐私泄露

隐私保护是一个敏感的问题,需要额外的关注和重视,尤其是AI模型中包含有未成年人的数据时,问题就更复杂了。例如,针对青少年的一些借记卡选项,银行必须确保其安全标准符合监管合规要求。所有以任何形式或途径收集客户信息的公司都需要制定数据保护政策。这样,客户就可以知道组织如何处理他们的数据。然而,用户如何知道他们的数据是否流入了人工智能算法的应用中?很少(或者可以说几乎没有)隐私策略包含这些信息。

我们正在步入人工智能驱动的时代,对于个人来说,了解企业如何使用人工智能、人工智能的功能及其对数据的影响将变得非常重要。同样地,攻击者可能会试图使用恶意软件窃取包含信用卡号码或社会安全号码等个人信息的敏感数据集。企业组织必须定期进行安全审计,并在人工智能开发的所有阶段实施强有力的数据保护实践。隐私风险可能发生在数据生命周期的任何阶段,因此为所有利益相关者制定统一的隐私安全策略非常重要。

威胁3 数据篡改

数据操纵、暴露和篡改所带来的风险,在AI规模化应用背景下正在被不断放大,因为这些系统需要基于大量数据进行分析决策,而这些数据很容易被恶意行为者操纵或篡改。此外,算法偏见是人工智能规模化应用中所面临的另一个主要问题。人工智能算法和机器学习程序应该是客观和公正的,但事实却并非如此。

人工智能算法的数据篡改威胁是一个巨大的问题,这没有简单的解决方案,但它需要引起重视。如何确保输入算法的数据是准确、可靠且不被篡改的?如何确保数据不会以令人讨厌的方式使用?所有这些问题都是非常现实的问题,但目前行业还没有找到明确的答案。

威胁4 内部威胁

数据安全而言,来自内部威胁无疑是最危险的一种,也是代价最高昂的一种类型。根据最新的《内部威胁成本:全球报告》显示,在过去两年中,内部威胁事件的数量上升了44%,每起事件的平均损失成本为1538万美元。

内部威胁之所以如此危险,是因为他们的动机不一定是金钱,还可能是出于报复、好奇心或人为错误等其他因素。正因如此,它们比外部的攻击者更难预测和阻止。

对于那些涉及公民健康的公司来说,内部威胁无疑是更有害的。以医疗保健服务商HelloRache为例,该公司使用了AI模式的虚拟记录员(virtual scribes,协助医生处理计算机相关任务的助手)工具,因此他们可以远程协助医生护理病人,做病情记录工作。但如果内部人员找到了方法,可能会导致系统被错误连接,甚至可以监控获取患者的医疗信息。

威胁5 针对性蓄意攻击

一项研究数据显示,86%的企业组织开始将人工智能作为未来数字化发展的“主流”技术,并加大投资各种数据驱动的AI技术,以帮助企业做出更好的决策、改善客户服务并降低成本。但有一个问题:对人工智能系统的蓄意攻击正在增加,如果没有适当的控制措施,它们可能会为组织带来超百万美元的损失。

“蓄意攻击”是指有目的地通过侵入人工智能系统来破坏一个组织的业务运作,目的是获取领先于对手的竞争优势。在蓄意攻击场景中,对AI和ML的数据安全威胁可能尤其具有破坏性。因为这些系统中使用的数据通常是专有的,具有很高的价值。当人工智能系统遭到针对性的蓄意攻击时,其后果不仅仅是数据被窃取,而是公司的竞争能力被破坏。

威胁6 大规模采用

人工智能是正在快速增长的行业,这意味着它们仍然很脆弱。随着AI应用越来越受欢迎,并在世界范围内被采用,黑客将会找到新的方法来干扰这些程序的输入和输出。AI通常是一套复杂的系统,以至于开发人员很难知道他们的代码在各种应用情况下会如何表现。当无法预测会发生什么时,就很难阻止它的发生。

保护企业免受大规模应用威胁的最佳方法是结合良好的编码实践、测试流程,并在发现新漏洞时及时更新。当然,不要放弃传统形式的网络安全预防措施,例如使用托管数据中心来保护服务器免受恶意攻击和外部威胁。

威胁7 AI驱动的攻击

研究人员发现,恶意攻击者正在将人工智能武器化,帮助他们设计和实施攻击。在这种情况下,“设计攻击”指的是选择一个目标,确定他们试图窃取或破坏什么数据,然后决定一种传输方法。非法攻击者可以使用机器学习算法寻找绕过安全控制的方法来进行攻击,或者使用深度学习算法,根据真实世界的样本创建新的恶意软件。安全专家必须不断防御愈发智能的机器人,因为一旦他们阻止了一种攻击,另一种新的攻击就会出现。简而言之,人工智能使攻击者在当前安全保障措施中寻找漏洞变得更容易。

机器学习人工智能
本作品采用《CC 协议》,转载必须注明作者和本文链接
备受全球信息安全行业瞩目的RSA Conference 2023近期于美国旧金山召开,本次会议继续聚焦信息安全领域的前沿技术和热点话题。
人工智能技术已经开始融入到各类应用系统中,但研究机构Gartner认为:目前的自动化技术应用水平和能力可以进一步提升。Gartner分析师预测:超自动化技术很快将会成为全球性的商业技术发展趋势。在网络安全领域,超自动化可能是让组织有效管理众多警报和网络事件的利器。
摘 要:科技创新能力已经越来越成为衡量一国综合国力、军事实力的决定性因素,也深刻影响着武器装备发展和未来作战模式。以美国为代表的军事强国高度重视并长期坚持科技创新,通过制定战略规划、强化顶层管理、设立创新机构、加快项目布局等方式,多措并举推动网信重点领域科技创新,加速前沿科技创新成果的军事应用。截至目前,人工智能、区块链、网络安全等技术领域很多科技创新成果已经取得突破性进展,未来将对武器装备发展和
在通过钓鱼邮件等一系列手法占领一台计算机之后,攻击队入侵的脚步会进一步加快,包括收集域内信息,探查可能保存机密文件和敏感信息的主机位置,确定横向移动的目标,比如存储了所有计算机用户的账户密码信息的域控制主机。
最新研究数据显示,在2021年发现的恶意软件新型变种超过1.7亿个,这让企业组织的CISO及其团队在识别和阻止这些新威胁时面临巨大的压力。同时,他们还要面对各种挑战:技能短缺、手动关联数据、鉴别误报和开展漫长的调查等。
CISO及其团队在识别和阻止海量新威胁的同时,又不得不承受着来自各方面的挑战。
勒索软件攻击在2023年构成重大威胁。2023年,CaaS将继续构成威胁,这要求组织通过员工培训、威胁情报和事件响应解决方案优先考虑防御。2023年,网络卫生对于保护个人信息免遭窃取和侵害仍至关重要。组织必须随时了解并遵守不断变化的法规,以保护其系统免遭网络威胁。员工意识到异常并向IT管理员报告异常可以大大降低遭受成功攻击的风险。
VSole
网络安全专家