生成式AI加速演进,新挑战怎么防
创始人
2026-02-02 07:17:27

【环球时报报道 记者 马俊】网络安全如今深刻影响各国的政治、经济、文化、社会等不同领域,越来越多的案例证明“没有网络安全就没有国家安全”。特别是生成式AI的加速演进,带来全新的安全挑战。1月29日到30日在成都举行的2026年网络安全等级保护技术学术交流活动中,与会的业内专家给出了不同的“解题思路”。

据《环球时报》记者了解,由于生成式AI与生俱来的缺陷,它在快速发展的同时,也带来包括数据污染、违规内容生产、机理不透明、能力滥用、意识形态渗透、模型缺陷、隐私泄露、深度伪造乃至知识产权保护、责任归属等各种突破传统安全领域的新挑战。

中国工程院院士邬江兴在本次活动中,围绕当前AI安全治理挑战作专题报告。他强调,各国AI竞争的本质,是一场终点线模糊的马拉松式耐力比赛,决定胜负的关键并非哪个国家取得了突破性技术,而是谁能更高效地推动AI在各生态系统实现规模化渗透应用。但AI想要大规模应用,首先就面临“安全信任壁垒”的问题——对于大众用户来说,需要确认AI到底有多安全,才能“敢用”;对于电力、金融、政务等关键行业来说,则只有了解了AI犯错会造成多大的影响、责任如何界定,才谈得上“敢推广”;而从监管的角度说,更是需要知道AI安全如何去衡量、监督和处置,才谈得上“敢管”。

邬江兴院士表示,从当前生成式AI的基本原理来说,它的基础就存在安全边界不确定的内生缺陷。“AI系统的数字化底座——底层计算平台和操作系统基于存储程序控制构造,不可能彻底杜绝设计的脆弱性(例如漏洞等),由此必然导致底座安全边界的不确定。”美国人工智能公司OpenAI的研究更是从数学上证明,大模型的风险根植于训练数据的统计学本质,因此出现“机器幻觉”是必然的,无法根除。

这也是传统方法应对“AI犯错”时遭遇的困境:优化训练数据、改进训练方法和模型结构等手段,不可能彻底消除AI安全边界的不确定性;而人类或传统机器监管AI,也面临海量的AI“管不过来也管不了”的问题。即便是在网络安全领域常用的组织“红蓝对抗”,通过实战手段测试系统的安全防御能力,在当前大部分AI应用场景中也显得无能为力——因为“红蓝对抗”是分为明确的攻击方和防御方,但当前大部分AI问题都源于“无攻击方的内生失效”。

针对这些困局,邬江兴院士在报告中提出了AI内生安全理论,让AI安全性由构造自身效应而非后验迭代修补来保证,他建议效仿汽车工业一整套的质量安全监管体系,在AI领域也建立有公信力的安全评测标准,让政府监管“有据可依”,让企业知道怎么去“自律”,让用户放心使用。

在活动现场,还颁发了中国首个第五级信息系统备案证明,并同步发布《生成式人工智能网络安全等级保护与检测技术白皮书》。白皮书在公安部网络安全保卫局统筹指导下,由公安部网络安全等级保护中心、网络安全等级保护与安全保卫技术国家工程研究中心联合政产学研用30家单位编制,经院士及权威专家把关,系统梳理生成式人工智能面临的突出安全风险,探索等级保护实施路径并提出工作建议,为产业规范有序发展提供技术支撑。

中国工程院院士吴建平表示,在人工智能与计算机互联网为基础的网络空间加速融合背景下,需要协同推进网络安全等级保护、关键信息基础设施保护、数据安全保护,夯实底层技术,构建动态防护体系,坚持开放协同创新,筑牢网络强国安全屏障。

中国科学院院士冯登国表示,当前数字技术与实体经济深度融合,新技术新业态快速涌现,安全威胁的隐蔽性和传导性提升,面对新形势如何构建与数字时代匹配的等级保护制度体系,推动等级保护向实战化、体系化、智能化转型,是大家必须直面的重大课题。

中国社科院法学所研究员支振锋强调了加快《网络安全等级保护条例》立法的必要性和紧迫性,他指出当前法律、行政法规等各层面已具备推进立法条件,应进一步健全网络安全等级保护工作机制。

⚠️
本网站信息内容及素材来源于网络采集或用户发布,如涉及侵权,请及时联系我们,发送链接至2697952338@QQ.COM,我们将第一时间进行核实与删除处理。

相关内容

热门资讯

饮水机多久洗一次才干净:聪明座... 一、饮水机里最脏的地方不在出水口很多人擦饮水机,只擦外壳和出水口,其实真正容易藏污的是三个部位:桶身...
手机一晃就跳广告:开屏摇一摇的... 一、不是手机坏了,是广告在等你晃很多人有这样的经历:打开查天气、看新闻的 App,手指还没落下去,只...
GPS和GPRS有什么区别:一... 做定位终端或者车载设备的时候,GPS和GPRS这两个词经常一起出现,很多新手分不清。其实它俩干的是完...
菊花茶不是越白越大越好:品种区... 秋冬吃火锅烧烤的人多了,很多人习惯饭后泡一杯菊花茶去去火气。但一到选购就犯难:杭白菊、贡菊、滁菊、野...
海虹青口正当季:挑贝四步、去内... 菜市场里的海虹、青口、淡菜,其实是同一类东西:鲜活的叫海虹或青口,学名叫贻贝,煮熟晒干后就叫淡菜。它...
快递里的好评返现卡别急着扫码:... 一、这张小卡片在要什么拆快递时掉出来的卡片,内容大多相似:全五星、晒图、附上订单截图,加微信领红包,...
RFID开发入门:从标签选读到... RFID开发这两年随着物联网热起来,做仓储、做资产管理的项目经常碰到。整个系统说起来就四样东西:电子...
入冬的棉拖鞋别随手买:鞋底材质... 天气一冷,家家户户都要换上棉拖鞋,很多人顺手在超市或网上买一双就完事。其实拖鞋看着简单,踩在脚底下的...
淘米到底洗几遍才合适:B族维生... 新米上市的时节,很多人打开米袋第一件事就是接水淘米,有人非要淘到水清为止,有人习惯用手使劲搓。这件小...
火锅底料怎么挑:牛油清油、清汤... 天一冷,超市货架上的火锅底料就摆到了正中位置。它属于复合调味料,按 GB 31644—2018《食品...
跨境电商购物有额度:单次500... 在跨境电商平台买奶粉、保健品、化妆品,结算时偶尔会跳出"超出个人年度额度"的提示。很多人第一反应是自...
SIP网关是干什么的:IP电话... 企业上IP电话系统的时候,总会碰到一个设备叫SIP网关。它的作用一句话概括:在IP网络和传统电话网络...
无线充电器随便放就能充吗:原理... 手机往充电板上一放就能补电,无线充电这几年已经从新鲜玩意变成了不少办公桌、床头柜上的标配。不过围绕它...
黄花鱼不是越黄越好:染色鱼辨别... 眼下正是黄花鱼上市的旺季,菜市场冰台上金黄的鱼肚格外显眼。黄花鱼肉质细嫩、呈蒜瓣状,肌间刺少,是家常...
ZigBee应用都在哪些场景:... ZigBee这个词在物联网圈子里听了十几年了,家里用的智能灯泡、门窗传感器,不少就是靠它联网的。它是...
手机充电器混着用会伤电池吗:协... 一、充电器和手机先“谈条件”把充电器插上手机,第一步不是通电,而是握手。充电器先报出自己能提供的电压...
眼镜鼻托发绿不是中毒:铜绿哪来... 摘下眼镜,鼻托内侧和镜腿贴太阳穴那一段,常蒙着一层擦不掉的绿。有人担心是"毒素"渗出来,也有人拿牙膏...
高压变频器原理图怎么看:从移相... 高压变频器在工厂里主要干一件事:给6kV、10kV的大功率电机调速,风机、水泵、磨机这些电老虎配上它...
MPPT控制器是干什么用的:光... 装太阳能发电系统,控制器选MPPT还是PWM,直接关系到能多收多少电。MPPT全称最大功率点跟踪,作...
和众汇富1980的学员反馈,从... 有些学员最初接触投资教育,希望尽快学会一套看得见效果的方法,学习一段时间后,却开始把注意力放在风险、...
和众汇富1980的学员反馈,反... 同一堂课,有人听过一次就能记住主要内容,也有人需要隔几天重新观看,才能把零散的知识联系起来。和众汇富...
和众汇富1980的学员反馈,从... 学员接触内容丰富的投教课程时,最初往往希望每个栏目都不要错过,后来才发现学习时间必须留给理解和复习。...
和众汇富1980适合哪些人,收... 不少人有学习财经知识的打算,也收藏了许多课程和资料,但真正有空时,却总觉得需要等到更完整的时间才能开...
和众汇富1980适合哪些人,喜... 有些学习者对财经知识很有兴趣,遇到陌生术语就愿意花时间查找,甚至会把一段课堂资料研究得十分详细,却很...
和众汇富1980适合哪些人,听... 有些人听课时能够跟上老师的思路,也觉得讲解清楚,但课程结束以后,却很难把刚学到的内容完整说出来。和众...