奇安信安全专家黄巍:“用AI治理AI”是必然方向丨2025世界互联网大会 奇安信天擎和360安全卫士 奇安信安全加固
创始人
2025-11-08 17:32:35
0

红星资本局11月8日消息 2025年世界互联网大会乌镇峰会期间,奇安信(688561.SH)安全专家黄巍接受红星资本局采访时表示,人工智能时代到来,AI全面应用的同时也会带来新的网络安全风险。

黄巍认为,新型攻击主要发生在三个阶段。第一,训练阶段的数据投毒:攻击者向模型的训练数据中注入恶意样本,导致模型性能下降、质量退化。第二,服务阶段的滥用与中断:通过身份滥用、DDoS攻击等手段攻击提供服务的模型,导致模型服务不可用或性能大幅下降。第三,应用阶段的提示词攻击:使用非常隐蔽的恶意提示词,混淆在用户正常问题中,造成算力消耗、内容诱导。


随着AI成为千行百业中不可或缺的基础工具,未来可能存在的最大潜在风险,是难以区分真实和虚幻,所以也需要“用AI治理AI”。未来AI的发展趋势可能是各行各业全面拥抱AI,同时开始规范和治理AI,采购相关的产品与服务来“反制”AI带来的问题。

另一方面,黄巍指出,虽然“用AI治理AI”是必然方向,但过程中也可能出现幻觉或“杜撰”。例如用AI对软件、程序等进行测试,AI为了完成人类设定的KPI,可能会凭空捏造问题来凑数,因此也需要人工进行二次校对。

红星新闻 记者俞瑶 实习记者 李海颜乌镇摄影报道

编辑 陶玥阳

审核 王光东

相关内容

热门资讯

聚焦进博|“进博会是真正的机遇... 在第八届中国国际进口博览会(下称“进博会”)上,阿联酋首次以主宾国身份亮相,成为今年展会的一大焦点。...
东方之邀,共赴沧海之阔 东方之... 与全球发展不确定性形成对比的,是从未动摇的中国承诺——“对外开放的大门不会关闭,只会越开越大。”图片...
聚焦进博|“中马合作远超贸易数... 第八届中国国际进口博览会(下称“进博会”)期间,马来西亚开启在中国迄今为止最大规模的贸易推广活动——...
新消费周报 | 饿了么回应将更... 《CBNData新消费周报》精选本周新消费领域最新动态,公司头条、消费风向、智能创新、营销动态、可持...
进入流感高发期,甲型H3N2毒... 红星资本局11月8日消息,近期,随着季节转换,流感进入活跃期。中国疾控中心最新监测周报显示,我国南方...
V观财报|扬杰科技:目前公司产... 【V观财报|扬杰科技:目前公司产品价格总体稳定】有投资者向扬杰科技提问称,公司产品是否有涨价计划。1...
奇安信安全专家黄巍:“用AI治... 红星资本局11月8日消息 2025年世界互联网大会乌镇峰会期间,奇安信(688561.SH)安全专家...
“文旅+金融”深度融合,诗画浙... 未来,浙商银行将继续深化县域服务、深耕文旅产业,加强各方合作,进一步将景区权益从浙江省拓展到长三角地...
哪些省份被纳入“航母命名库”?... 据人民日报客户端消息,11月5日,我国第一艘电磁弹射型航空母舰福建舰在海南三亚某军港入列。8日下午,...
提升气象预警能力 青海首部CD... 根据青海省气象局消息,11月7日,西宁达坂山天气雷达业务准入测试顺利完成。标志着青海首部CD型双偏振...