微资讯!人工智能高歌猛进背后暗藏多重安全风险
发布时间:2022-10-12 15:38:26 文章来源:中国青年报
试想一下,有人将一张“贴纸”贴在面部,就可以使人脸识别门禁系统误认为是你,从而轻而易举打开大门;同样是这张“贴纸”,把它贴在眼镜上,

试想一下,有人将一张“贴纸”贴在面部,就可以使人脸识别门禁系统误认为是你,从而轻而易举打开大门;同样是这张“贴纸”,把它贴在眼镜上,就可以1秒解锁你的手机人脸识别,探取隐私如入无人之境。这并非科幻大片的想象,而是首届人工智能安全大赛颁奖典礼现场展示的真实攻防场景。


(资料图片仅供参考)

前不久,由国家工业信息安全发展研究中心、清华大学人工智能研究院和北京瑞莱智慧科技有限公司等单位联合主办的首届人工智能安全大赛落幕。大赛期间,有关人工智能安全风险引发讨论。与会专家表示,人工智能安全风险已非未来挑战,而是眼前威胁,要重视人工智能安全体系建设,加快促进人工智能安全领域关键技术研究与攻防实践。

人工智能和其他通用技术一样,在高歌猛进的同时,也带来了一定的风险和隐患。曾获“吴文俊人工智能优秀青年奖”的瑞莱智慧首席执行官田天认为,人工智能技术风险发生的范围,正随着应用场景的日趋广泛而逐步扩大,风险发生的可能性也随着其应用频次的增长而持续提高。在他看来,人工智能当前的安全风险主要可以从“人”与“系统”这两个视角来剖析。

从人的视角来评估人工智能的安全问题,首当其冲就是技术的两面性问题,存在人工智能滥用的问题。具体到人工智能的应用中来看,最为典型的代表就是深度伪造技术,它的负向应用风险持续加剧且已产生实质危害。

此次大赛的人脸识别破解演示,所揭示的正是系统的风险,它来自深度学习算法本身的脆弱性。以深度学习算法为核心的第二代人工智能是个“黑盒子”,具有不可解释性,意味着系统存在结构性的漏洞,可能受到不可预知的风险,典型的就比如现场演示的“神奇贴纸”,其实就是“对抗样本攻击”,通过在输入数据中添加扰动,使得系统作出错误判断。

这一漏洞在自动驾驶感知系统同样存在。正常情况下,在识别到路障、指示牌、行人等目标后,自动驾驶车辆就会立即停车,但在目标物体上添加干扰图案后,车辆的感知系统可能会出错,径直撞上去。

大赛期间,《人工智能算力基础设施安全发展白皮书》发布。其中提到,人工智能算力基础设施不同于传统的算力基础设施,既是“基础设施”又是“人工智能算力”也是“公共设施”,具有基建属性、技术属性、公共属性三重属性。相应地,推动人工智能算力基础设施安全发展应从强化自身安全、保障运行安全、助力安全合规三个方面发力。

统筹发展和安全,似乎是每项新技术发展过程中面临的必然问题,如何实现高水平发展和高水平安全的良性互动,也是当前人工智能产业发展最为重要的命题之一,现场多位专家就此话题展开讨论。

“人工智能对抗攻防包括对抗样本、神经网络后门、模型隐私问题等多方面技术。模型有错误,就需要进行及时的修复。”中国科学院信息安全国家重点实验室副主任陈恺提出“神经网络手术刀”的方法,通过定位引发错误的神经元,进行精准“微创”修复。

陈恺表示,不同于传统的模型修复工作需要重新训练模型,或者依赖于较大量的数据样本,这种方式类似于“微创手术”,只需极少量数据样本,能够大幅提升模型修复效果。

开放环境下的人工智能系统面临诸多安全挑战,如何解决通用人工智能算法全周期的安全保障问题成为重中之重。

北京航空航天大学软件开发环境国家重点实验室副主任刘祥龙表示,从技术上来看应形成从安全性测试到安全性分析与安全性加固的完整技术手段,最终形成标准化的测试流程。

他同时指出,未来的人工智能安全应该围绕从数据、算法到系统各个层次上的全面评测,同时配合一套从硬件到软件的安全可信计算环境。

工商银行金融研究院安全攻防实验室主管专家苏建明表示,人工智能安全治理需要广泛协作和开放创新,需加强政府、学术机构、企业等产业各参与方的互动合作,建立积极的生态规则。政策层面加快人工智能的立法进程,加强对人工智能服务水平、技术支撑能力等专项监督考核力度。学术层面,加大对人工智能安全研究的激励投入,通过产学研合作模式加快科研成果的转化与落地。企业层面,逐步推动人工智能技术由场景拓展向安全可信发展转变,通过参与标准制定,推出产品服务,持续探索人工智能安全实践及解决方案。

事实上,构建人工智能的安全生态,一方面需要技术的持续演进,一方面也需要专项技术人才的建设与培养。田天表示,由于人工智能安全研究目前仍属于新兴领域,专项人才较少,缺乏系统性的研究队伍,此次大赛通过实战演练的方式,验证和提升选手实战能力,为培育一批高水平、高层次的人工智能安全新型人才团队提供了“快速通道”。

专家们认为,从长远看,人工智能的安全问题,还需从算法模型的原理上突破,唯有持续加强基础研究,才能破解核心科学问题,同时他们强调,人工智能的未来发展需确保对整个社会、国家发展的有效性和正向促进性,需要政产学研用多方协同共进。(中青报·中青网记者 邱晨辉)

关键词: 人工智能 基础设施 安全问题

热点HOT

  • 苹果第三财季营收是多少 苹果过去四个季度的总营收是多少?
    苹果第三财季营收是多少 苹果过

    苹果第三财季营收是多少?苹果第三财季营收为 829 59 亿美元。按照国际货币基金组织 (IMF) 公布的 2021 年各国 GDP 数据,如果苹果

  • 城市数字经济发展历程分为哪几个阶段 城市数字经济发展呈现出哪些发展趋势?
    城市数字经济发展历程分为哪几个

    城市数字经济发展历程分为哪几个阶段?起步萌芽期(2016年之前)。随着城镇化的快速推进和人口红利驱动消费互联网的快速发展,数字经济在城市

  • 每天需要吃多少绿叶蔬菜 什么是深绿色叶菜?
    每天需要吃多少绿叶蔬菜 什么是

    每天需要吃多少绿叶蔬菜?要预防年龄带来的认知退化,到底需要吃多少绿叶蔬菜呢?按上述研究结果,每天只需食用1份绿叶蔬菜就可以起作用。所

  • 高血压能喝酒吗 高血压患者适宜的运动方式有哪些?
    高血压能喝酒吗 高血压患者适宜

    高血压能喝酒吗?长期过量饮酒是高血压、心血管病发生的危险因素,而且饮酒还可对抗降压药的作用,使血压不易控制。戒酒后,除血压下降外,

  • 什么是企业创新积分制 全国积分企业有多少家?
    什么是企业创新积分制 全国积分

    什么是企业创新积分制?2020年,科技部火炬中心在杭州高新区等13家国家高新区,率先以试点形式探索建立一种基于数据驱动、定量评价、积分赋

  • 松茸有哪些活性物质 松茸的保鲜时间是多久?
    松茸有哪些活性物质 松茸的保鲜

    松茸有哪些活性物质?松茸有3种珍贵的活性物质。一是松茸醇,这是它独有的物质,具有强抗基因突变能力和抗癌能力。二是双链松茸多糖,能激活

  • 如何优化大科学装置的建设布局 如何才能让大科学装置更好地服务国家战略需求?
    如何优化大科学装置的建设布局

    如何优化大科学装置的建设布局?大科学装置的建设布局必须做好顶层设计,坚持全国一盘棋、统筹考虑,重点要考虑其用户需求和国际领先性。为

  • 跟先进国家相比大科学装置的先进性如何 如何看待各地纷纷上马建设大科学装置现象?
    跟先进国家相比大科学装置的先进

    跟先进国家相比大科学装置的先进性如何?跟先进国家相比,我们还有很长的路要走。无论是大科学装置的先进性、独创性,还是科研人员利用大科

  • 桃有哪些药用功效 桃子的吃法有哪些?
    桃有哪些药用功效 桃子的吃法有

    桃有哪些药用功效?桃历来被列为我国五果之一,具有补益心肺、生津止渴、消积润肠、解劳热等功效,特别适合老年患者的食养食疗。治疗虚劳咳

  • 汽车OLED面板市场规模是多少 LG显示一季度的市场份额是多少?
    汽车OLED面板市场规模是多少 LG

    汽车OLED面板市场规模是多少?汽车 OLED 面板市场的规模,在今年预计为为 1 6 亿美元,未来几年的复合年均增长率将高达 42%,市场规模

新闻LOVE