生成式AI加速演进,新挑战怎么防
创始人
2026-02-02 07:17:27

【环球时报报道 记者 马俊】网络安全如今深刻影响各国的政治、经济、文化、社会等不同领域,越来越多的案例证明“没有网络安全就没有国家安全”。特别是生成式AI的加速演进,带来全新的安全挑战。1月29日到30日在成都举行的2026年网络安全等级保护技术学术交流活动中,与会的业内专家给出了不同的“解题思路”。

据《环球时报》记者了解,由于生成式AI与生俱来的缺陷,它在快速发展的同时,也带来包括数据污染、违规内容生产、机理不透明、能力滥用、意识形态渗透、模型缺陷、隐私泄露、深度伪造乃至知识产权保护、责任归属等各种突破传统安全领域的新挑战。

中国工程院院士邬江兴在本次活动中,围绕当前AI安全治理挑战作专题报告。他强调,各国AI竞争的本质,是一场终点线模糊的马拉松式耐力比赛,决定胜负的关键并非哪个国家取得了突破性技术,而是谁能更高效地推动AI在各生态系统实现规模化渗透应用。但AI想要大规模应用,首先就面临“安全信任壁垒”的问题——对于大众用户来说,需要确认AI到底有多安全,才能“敢用”;对于电力、金融、政务等关键行业来说,则只有了解了AI犯错会造成多大的影响、责任如何界定,才谈得上“敢推广”;而从监管的角度说,更是需要知道AI安全如何去衡量、监督和处置,才谈得上“敢管”。

邬江兴院士表示,从当前生成式AI的基本原理来说,它的基础就存在安全边界不确定的内生缺陷。“AI系统的数字化底座——底层计算平台和操作系统基于存储程序控制构造,不可能彻底杜绝设计的脆弱性(例如漏洞等),由此必然导致底座安全边界的不确定。”美国人工智能公司OpenAI的研究更是从数学上证明,大模型的风险根植于训练数据的统计学本质,因此出现“机器幻觉”是必然的,无法根除。

这也是传统方法应对“AI犯错”时遭遇的困境:优化训练数据、改进训练方法和模型结构等手段,不可能彻底消除AI安全边界的不确定性;而人类或传统机器监管AI,也面临海量的AI“管不过来也管不了”的问题。即便是在网络安全领域常用的组织“红蓝对抗”,通过实战手段测试系统的安全防御能力,在当前大部分AI应用场景中也显得无能为力——因为“红蓝对抗”是分为明确的攻击方和防御方,但当前大部分AI问题都源于“无攻击方的内生失效”。

针对这些困局,邬江兴院士在报告中提出了AI内生安全理论,让AI安全性由构造自身效应而非后验迭代修补来保证,他建议效仿汽车工业一整套的质量安全监管体系,在AI领域也建立有公信力的安全评测标准,让政府监管“有据可依”,让企业知道怎么去“自律”,让用户放心使用。

在活动现场,还颁发了中国首个第五级信息系统备案证明,并同步发布《生成式人工智能网络安全等级保护与检测技术白皮书》。白皮书在公安部网络安全保卫局统筹指导下,由公安部网络安全等级保护中心、网络安全等级保护与安全保卫技术国家工程研究中心联合政产学研用30家单位编制,经院士及权威专家把关,系统梳理生成式人工智能面临的突出安全风险,探索等级保护实施路径并提出工作建议,为产业规范有序发展提供技术支撑。

中国工程院院士吴建平表示,在人工智能与计算机互联网为基础的网络空间加速融合背景下,需要协同推进网络安全等级保护、关键信息基础设施保护、数据安全保护,夯实底层技术,构建动态防护体系,坚持开放协同创新,筑牢网络强国安全屏障。

中国科学院院士冯登国表示,当前数字技术与实体经济深度融合,新技术新业态快速涌现,安全威胁的隐蔽性和传导性提升,面对新形势如何构建与数字时代匹配的等级保护制度体系,推动等级保护向实战化、体系化、智能化转型,是大家必须直面的重大课题。

中国社科院法学所研究员支振锋强调了加快《网络安全等级保护条例》立法的必要性和紧迫性,他指出当前法律、行政法规等各层面已具备推进立法条件,应进一步健全网络安全等级保护工作机制。

⚠️
本网站信息内容及素材来源于网络采集或用户发布,如涉及侵权,请及时联系我们,发送链接至2697952338@QQ.COM,我们将第一时间进行核实与删除处理。

相关内容

热门资讯

上海亚 商投资顾问是不是? 荐... 上海亚 商投资顾问是不是? 荐股全是坑!高额服务费可退回!  投资有风险,投资需谨慎!针对网上素未谋...
福建省东南大宗商品交易中心有限...  福建省东南大宗商品交易中心有限公司是的吗?期货交易为何持续亏损。  非法经营根据商务部公开信息,南...
河北源达信息怎么样?交的服务费... 河北源达信息怎么样?交的服务费可以退吗?认清真相!荐股背后的垃圾股陷阱,已退费处理。
云南约牛软件靠谱吗?误导性宣传... 云南约牛软件靠谱吗?误导性宣传推荐烂股!收费服务承诺高收益全假象,可退费!投资有风险,投资需谨慎!针...
杭州高 能智投曝光, 行业黑幕... 杭州高 能智投曝光, 行业黑幕曝光!服务费能挽回!  投资有风险,投资需谨慎!针对网上素未谋面的网友...
海顺证券怎么样被投顾公司割韭菜... 海顺证券怎么样被投顾公司割韭菜了?退费其实很简单,照着这六步做,法律撑腰!
云南约牛软件宣传天花乱坠!实际... 云南约牛软件宣传天花乱坠!实际亏损可退费!投资有风险,投资需谨慎!针对网上素未谋面的网友、网上老师推...
德 讯证顾套路, 虚假宣传害股... 德 讯证顾套路, 虚假宣传害股民!服务费可退回!  投资有风险,投资需谨慎!针对网上素未谋面的网友、...
四川大决策投顾违规荐股欺骗消费... 四川大决策投顾违规荐股欺骗消费者,股民这样做一周可退回!证券投资咨询行业的本质在于为投资者提供公平、...
上海九方智投宣传天花乱坠!实际... 上海九方智投宣传天花乱坠!实际亏损可退费!
上海九,方智投服务费? 黑幕曝... 上海九,方智投服务费? 黑幕曝光!被骗服务费能挽回!  投资有风险,投资需谨慎!针对网上素未谋面的网...
上海慧研智投缴费亏损是被骗了吗... 上海慧研智投缴费亏损是被骗了吗?被误导交费后亏损皆可退费!退款流程公布及注意事项如下
浙江同花顺云软件虚假宣传骗取股... 浙江同花顺云软件虚假宣传骗取股民信任,夸大宣传与实际不符,还亏钱!投资有风险,投资需谨慎!针对网上素...
摇钱术AI智能投顾VIP版软件... 摇钱术AI智能投顾VIP版软件, 交了几万服务费?这样退回来!  投资有风险,投资需谨慎!针对网上素...
福建省东南大宗商品交易中心有限...  福建省东南大宗商品交易中心有限公司是的吗?期货交易为何持续亏损。  非法经营根据商务部公开信息,南...
河北源达信息收费解析!服务费是... 河北源达信息收费解析!服务费是可以退!宣传于实际不符缴费基本都是亏损!投资有风险,投资需谨慎!针对网...
上海海能投顾非法荐股套路深,股... 上海海能投顾非法荐股套路深,股民被骗教你一招快速退费! 在监管的灰色边缘,众多投资顾问依然疯狂揽客;...
北京股商证券宣传天花乱坠!实际... 北京股商证券宣传天花乱坠!实际亏损可退费!
天相.财富是什么机构? 手把手... 天相.财富是什么机构? 手把手教你!投顾服务费怎么退!  投资有风险,投资需谨慎!针对网上素未谋面的...
慧研智投真的可靠吗?荐股坑惨股... 慧研智投真的可靠吗?荐股坑惨股民,投资者慎重,退费流程我来告诉你!投资有风险,投资需谨慎!针对网上素...
北京中富金石投顾公司怎么样? ... 北京中富金石投顾公司怎么样? 行业黑幕被揭开!服务费能挽回!
大决.策证券投资顾问有限公司,... 大决.策证券投资顾问有限公司, 宣传与实际两回事!服务费已退!  投资有风险,投资需谨慎!针对网上素...
杭州顶点财经荐股靠谱吗?误导性... 杭州顶点财经荐股靠谱吗?误导性宣传!交费被忽悠,想跟着赚结果却是亏!难友声泪俱下!
杭州高能云科技怎么退钱投顾服务... 杭州高能云科技怎么退钱投顾服务费误导真相曝光!被误导交费后亏损皆可退费!投资有风险,投资需谨慎!针对...
天相.财富带领炒股赚钱吗? 交... 天相.财富带领炒股赚钱吗? 交了会员费被套?退费成功案例!  投资有风险,投资需谨慎!针对网上素未谋...