设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

专访呼娜英:AI安全“隐形战场”上,如何破解全链条风险?

2025-02-19 09:39:30 来源:

  中新经纬2月18日电 (孙庆阳)“人工智能的安全与可用性面临全链条、多维度交织的复杂风险挑战,需通过国际合作、技术创新和标准制定来应对。”近日,中国信息通信研究院人工智能研究所高级业务主管呼娜英在巴黎人工智能(AI)行动峰会后接受中新经纬专访时表示,未来五到十年,人工智能技术将持续深化,增强语言大模型能力是重点方向。同时,多模态模型有望加速突破,提升图文理解和跨模态交互能力。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  呼娜英 受访者供图3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  网络和框架是AI系统安全的根基3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  在最近的巴黎人工智能(AI)行动峰会上,AI安全性和可用性成为了全球AI产业人士的共同关注焦点。呼娜英指出,当前AI在安全性和可用性方面面临的是全链条、多维度相互交织的复杂风险挑战。随着人工智能模型复杂度和规模的不断提升,其训练、部署、应用等关键环节中面临的数据安全、网络安全、框架安全、模型算法安全以及应用平台安全问题日益突出。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  在基础设施方面,网络安全和框架安全关乎整个AI系统的稳定运行根基。以DeepSeek为例,R1模型在刚刚上线提供服务后,便遭到大规模DDoS(分布式阻断服务)攻击,导致服务中断,用户无法正常访问。在数据方面,训练数据被“投毒”(通过恶意注入虚假或误导性的数据来污染模型的训练数据集),以及训练使用敏感行业数据、个人隐私数据等,一旦数据被“投毒”,训练出的模型将产生偏差,做出错误决策,而敏感数据的不当使用则可能引发严重的法律风险和社会信任危机。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  在模型算法层面,以大模型为代表的生成式模型面临严峻的越狱攻击、提示词注入攻击等威胁,模型容易在用户恶意操作下输出违法有害或侵害权益的信息。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  此外,模型的“幻觉”(模型生成的不真实、编造或与上下文不一致的内容)问题突出,也成为了制约人工智能产业化落地的重要因素。在应用层面,人工智能技术容易被滥用和误用,比如利用图像生成技术伪造虚假新闻图片误导公众,或在自动化决策系统中因算法偏见导致对特定群体的不公平对待,这些行为严重扰乱了正常的社会秩序与市场环境。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  如何显著提升AI系统安全性?3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  呼娜英强调,全球均在探索风险管理的可行路径,针对人工智能风险开展有效的“识别、评估、应对”方案一定程度上成为共识。其中,最重要的一环是对于安全问题的检测技术和防护手段。在检测方面,一是形成对于开源框架、源代码以及网络等软硬件基础设施的漏洞挖掘技术,精准定位潜在隐患。特别是开源框架、代码中存在的未被发现的漏洞,极易被利用实施大规模的攻击和勒索。如去年年初,人工智能开源框架Ray被发现存在漏洞,并被攻击人员利用攻击数百个集群。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  二是形成数据“投毒”检测技术,用于守护训练数据的纯净性,防范通过训练的方式,在模型中埋入后门。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  三是建立大模型等模型算法漏洞自动化测试技术,扫描算法中的薄弱环节,快速生成测试报告。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  四是基于现有的自动化渗透技术能力,形成面向人脸识别、智能体等人工智能典型应用的自动化渗透技术产品,模拟黑客攻击,全方位探测应用平台的安全漏洞,充分发掘人工智能各方面的安全风险。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  呼娜英还指出,在防护层面,需要探索软硬件基础设施的漏洞自动化修复技术,自动修复受损代码,降低安全风险。此外,还可以探索实践模型漏洞自动化微调和加固技术,对模型进行自动化优化,增强其抵御攻击的能力,保障人工智能系统稳定、安全地运行。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  中国智慧引领未来AI治理新格局3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  呼娜英认为,推动人工智能安全治理合作依然是势不可挡的,也是确有必要的。人工智能的开发、部署和使用具有全球化特征,人工智能技术的应用与影响并非局限于某一地区或国家,而是深刻影响全球社会、经济和政治秩序。为人类共同未来建立务实可行的国际对话与合作机制,需要多方努力。未来,国际社会应在联合国框架下凝聚各方共识,依托国际标准化组织深化技术标准协同,务实推进人工智能安全治理工作。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  一直以来,中国在全球人工智能治理领域积极作为并推动加强国际合作。例如,中国信通院积极参与国际标准制定,发起《人工智能安全承诺》促进行业自律,下一步将依托工业和信息化部人工智能技术标准委员会,持续完善国内标准体系,推动安全测试、风险评估、可信要求等技术规范转化为国际共识,促进技术标准和指引的深入实践与应用。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  呼娜英预测,未来五到十年内,人工智能技术将持续深化演进。一方面,增强语言大模型能力仍是技术升级的重点方向之一,推理或将获得更多关注和资源投入。另一方面,多模态模型有望加速突破,从以语言大模型为骨干的多模态模型,向原生多模态模型演变,提升图文理解和跨模态交互能力。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  呼娜英认为,在安全与可用性方面,以下趋势值得关注:在风险识别方面,随着人工智能技术日益融入经济社会发展各领域全过程,其安全风险面不断扩大,对人工智能安全风险识别方法论的研究将不断完善,从而催生更加敏捷、精准的安全风险识别机制。在风险应对方面,对算法模型毒性、鲁棒性、公平性等方面的评测技术工具研究将不断加强,将人工智能基础设施、算法模型、上层应用以及产业链等方面作为评估重点,并在机制方案上动态迭代、技术能力上持续提升,从而有效防范和应对治理风险。(中新经纬APP)3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

  中新经纬版权所有,未经授权,不得转载或以其他方式使用。3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

责任编辑:张芷菡3l1流量资讯——探索最新科技、每天知道多一点LLSUM.COM

本文链接:专访呼娜英:AI安全“隐形战场”上,如何破解全链条风险?http://www.llsum.com/show-5-46596-0.html

声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

上一篇: 杨立钒:DeepSeek“逆袭”电商,成本地部署“黑马”

下一篇: 国家发改委:对民企反映的困难问题将精准施策助企纾困

热门资讯

推荐资讯

  • 德国酒店集团Motel One计划IPO,加速国际扩张步伐

    德国知名酒店品牌Motel One近期传出计划进行首次公开募股(IPO)的消息,此举旨在加速其国际扩张战略,并为未来的增长提供资金支持。据悉,Motel One酒店集团2023年取得了创纪录的业

  • 支付宝发布出境游消费新趋势

      近日,支付宝发布出境游消费新趋势:可持续出游成为出境游的新方式。国内游客除了想要更多的目的地优惠、更好的汇率、更地道的攻略,还希望去远方旅行时继续实践可持续低碳行

  • 国内首个“国际化友好景区”共建计划在黄山启动

      近日,国内首个“国际化友好景区”共建计划在黄山启动。据悉,该计划由中国人民银行黄山市分行、黄山风景区管委会等部门共同指导和支持,由支付宝、黄山旅游股份有限公司率先

  • “花中皇后”,跨越东西方的奇遇

    近日,2024上海(国际)花展盛大开幕。此次花展选取的主题花是被誉为“花中皇后”的月季。原产自中国,寻常可见的月季为何能成为“花中皇后”?它的身上其实

  • 雅阁酒店集团 | 聚焦存量酒店升级改造,东江湖城市度假逆袭

    康养度假、国潮趋势兴起,全球经济和文旅住宿结构面临转型升级,酒店原型是专营三文鱼餐饮的酒店,通过升级为湖南郴州东江湖雅阁度假酒店,以焕新姿态受到高端酒店市场的关注。 一

  • 加拿大多伦多市官方旅游推广机构任命新CEO

      近日,加拿大多伦多市官方旅游推广机构Destination Toronto,宣布Andrew Weir将于5月1日起成为新任总裁兼CEO。Weir此前是该组织的执行副总裁,曾领导战略合作伙伴关系,在旅游

  • 我们一起上春山

    人间美景四月天,草色青漫水如蓝。春日登山成了很多人迎接春天又锻炼体魄的最佳选择之一。有的人边走边吃,悠闲赏春花;有的人手脚并用,勇攀高峰成就满怀

  • “五一”假期到北京西山八大处 喝闽东好茶

    4月30日至5月5日,以“喝好茶 到闽东”“到西山八大处 喝闽东好茶”为主题的第二十三届八大处中国园林茶文化节暨宁德(柘荣高山白茶、寿宁乌茶)文化周

  • “五一”旅游新动向:小城缘何受青睐丨“假日经济”长红密码

    21世纪经济报道记者高江虹 北京报道 为期五天的2024年“五一”假期落幕。5月6日,文化和旅游部发布数据显示,今年“五一”假期全国国内旅游

  • 洲际酒店集团公布2024年第一季度财报

    5月7日,洲际酒店集团公布2024年第一季度财报。第一季度全球每间可售房收入(RevPAR)同比增长2.6%,其中美洲市场下降0.3%,欧洲、中东、非洲及亚洲市场(EMEAA)增长8.9%,大中华区市场增

  • 木鸟民宿:五一假期特色小城订单同比增长超八成

    5月5日,木鸟民宿发布《2024五一假期民宿消费报告》。据报告,今年五一假期民宿订单在2023年高位基础上稳中有增,五一当日订单同比增长110%,五一假期民宿市场价格平稳。其中,两江两

  • 上海海峡国际旅行社有限公司100%股权转让,底价249.04万元

      5月8日,据全国产权行业信息化综合服务平台披露,上海海峡国际旅行社有限公司100%股权挂牌转让,转让方为上海天虹兴港实业发展有限公司,转让底价为249.04万元,信息披露起止时间

  • 日榜
  • 周榜
  • 月榜