报告称英伟达人工智能软件可被轻易破解,存在泄露用户隐私的风险

VSole2023-06-12 10:26:13

据英国《金融时报》报道,英伟达人工智能软件“NeMo” 可被轻易绕过安全限制,并且有可能泄露用户隐私。

报道称,NeMo 是一款面向企业客户的软件,可结合企业用户数据与大语言模型,以此回答用户的问题。其应用场景包括客服和回答简单医疗问题等。加州信息安全公司 Robust 在报告中表示,恶意使用者能轻易绕开 NeMo 内部的 AI 系统安全限制。Robust 的研究员仅耗费几小时,便绕开了这些语言模型的使用限制。

IT之家注意到,在其中一项测试中,研究人员要求 NeMo 用字母“J”替代“I”,这使得 NeMo 公布了数据库中的用户个人信息。此外,研究人员还发现,尽管已将 NeMo 设定为仅能为用户提供择业建议,但通过引导式提问使 NeMo 讨论了好莱坞演员的健康情况和普法战争等话题。这意味着系统内阻止 AI 讨论特定话题的限制已经失效。

英伟达副总裁乔纳森科恩表示,NeMo 架构只是为了帮助打造符合开发者所定义的主题的聊天机器人,其以开源软件的形式发布给开发者。目前,这些漏洞已被修复。科恩拒绝透露有多少企业使用 NeMo 架构,但强调英伟达没有收到其他关于漏洞的报告。

软件人工智能
本作品采用《CC 协议》,转载必须注明作者和本文链接
报道称,NeMo 是一款面向企业客户的软件,可结合企业用户数据与大语言模型,以此回答用户的问题。加州信息安全公司 Robust 在报告中表示,恶意使用者能轻易绕开 NeMo 内部的 AI 系统安全限制。这意味着系统内阻止 AI 讨论特定话题的限制已经失效。目前,这些漏洞已被修复。科恩拒绝透露有多少企业使用 NeMo 架构,但强调英伟达没有收到其他关于漏洞的报告。
全球领先的工程团队的人工智能软件提供商Monolith日前宣布,其委托Forrester咨询公司进行的一项新研究发现,约有67%的工程领导者都感受到了采用AI的压力。
近期,美国人工智能公司OpenAI推出的聊天机器人ChatGPT在引发科技浪潮的同时,也招致多国监管部门对数据安全问题的关注。意大利个人数据保护局已于3月31日宣布,暂时禁止使用人工智能软件ChatGPT,限制其开发公司OpenAI处理意大利用户信息,并开始立案调查。
自2022年11月推出以来,人工智能聊天机器人ChatGPT已经因其惊人的表现而引起了不小的轰动。由于缺乏安全措施,威胁行为者很容易使用ChatGPT机制,例如,母语并非英语的恶意行为者可以用近乎完美的语法在几秒钟内创建一个逼真的、诱人的消息。公司可能没有采取足够的安全措施,阻碍了建立有效安全程序的进展。
随着ChatGPT在全球爆红,一批名字中包含“ChatGPT”的社交公众号、小程序和App等产品大量涌现,头像与ChatGPT官方图标非常相似。这些ChatGPT服务到底是真是假?
甘肃公安侦破首例利用AI人工智能技术炮制虚假信息案!经查,涉案百度账号均为广东深圳某自媒体公司所有,公司法人代表洪某弟有重大作案嫌疑。5月5日,专案民警在广东东莞嫌疑人住处对其使用的电脑及百家号进行取证。洪某弟利用现代科技手段编造虚假信息,并散布在互联网上,被大量传播浏览,其行为已涉嫌寻衅滋事罪。目前,崆峒公安分局对犯罪嫌疑人洪某弟采取刑事强制措施,案件正在进一步侦办之中。
据美联社报道,当地时间3月31日,意大利个人数据保护局宣布,暂时禁止使用人工智能软件ChatGPT,限制其开发公司OpenAI处理意大利用户信息,并开始立案调查。因此,意大利监管机构要求OpenAI公司必须在20天通报采取了哪些措施来确保用户数据隐私,否则将被处以最高2000万欧元或公司全球年营业额4%的罚款。当日晚些时候,OpenAI表示已在意大利将ChatGPT下线。该公司表示愿与意大利个人数据保护局密切合作。
据美联社报道,当地时间3月31日,意大利个人数据保护局宣布,暂时禁止使用人工智能软件ChatGPT,限制其开发公司OpenAI处理意大利用户信息,并开始立案调查。
9月21日,思科宣布将收购网络安全公司 Splunk,这笔交易价值约 280 亿美元(2047 亿元人民币),收购价格为每股 157 美元。
入围的四家网络安全创业公司分别是Samsara(第15位)、Verkada(第16位)、OneTrust(第49位)和Rubrik(第40位)。
VSole
网络安全专家