首页 > 原创知识 > 原创知识 > 曾毅:人工智能安全不是一个选择题,而是必答题

曾毅:人工智能安全不是一个选择题,而是必答题

发布时间:2024-08-06 16:14:02来源: 15210273549

人工智能正在重塑人类经济与社会,被寄予引领新一轮产业革命的厚望,业界纷纷抢滩布局。但在人工智能发展火热的同时,安全问题不容忽视。

7月24日,中国人工智能产业发展联盟(AIIA)安全治理委员会在京召开成果发布会,重磅发布一系列AI安全治理成果,共商人工智能安全向善。会上、中国科学院自动化研究所研究员、国家新一代人工智能治理专委会委员、联合国人工智能高层顾问机构专家曾毅从技术角度探讨了人工智能安全的问题,包括其内涵、范式与前沿。

作为《时代周刊》评选的“全球百大AI(人工智能)人物”之一,近年来,曾毅在不同场合强调人工智能安全与伦理问题。“目前没有任何一个人工智能产品可以说是绝对安全和可信的。”他表示,AI Safety(AI 安全)不是一个人工智能的分支或一个研究领域,而应该是所有人工智能科研工作者内建的基因。“不是一个选择题,而是一个必答题。”

 

AI安全隐患:非设计本意的意外

 

“AI safety区别于AI security,针对的是人工智能出现并非设计者本意的意外事故(即Accident is not what I want)。”曾毅说道。这与童话故事中国王请求上帝赋予他点石成金的能力,最终把自己女儿也变成金子的童话故事如出一辙。

他举了OpenAI的赛艇游戏案例,OpenAI曾训练了一个网络玩海岸赛艇的游戏,赛艇的目标是顺着跑道走与对手竞争完成比赛,而实际游戏中它却通过不断转圈收集沿途指定物品得到更高分数,放弃了比赛。

此外,谷歌的3D识别系统曾将3D打印的乌龟识别为来福枪,试想一个小女孩在路口拿着3D打印的乌龟却被识别为来福枪,这将对国防系统会带来怎样的挑战。

曾毅表示,人工智能时代,出现了很多安全隐患,区别于传统安全问题,其既不是开发者设计的,也不是由于外部攻击,而是来自内部缺陷。

 

没有绝对安全的人工智能

 

针对人工智能的安全问题,曾毅指出需要凝结产学研界,政策制定方共识。

在安全评测方面,曾毅指出,国内在大模型的内容安全、价值安全、数据安全、模型安全等领域做得较好,但在系统安全、应用安全方面相对欠缺。有些单位可能只在内容安全、价值安全上做了工作,数据安全模型方面基本空白,没有任何一家能构建完善的安全体系。

“目前没有任何一个人工智能产品可以说是绝对安全和可信的,我们的目标是开发可信安全的人工智能。”曾毅坦陈说。

业内提及的解决思路——让人工智能安全与能力取得平衡,曾毅并不认同。“人工智能安全本身就是人工智能能力的体现,把人工智能做的更安全,并不会降低人工智能的能力,更安全的系统人工智能的认知能力会更强。”

例如为防止霸凌问题,在校园安装摄像头,可以做到大多数情况下不采集人脸信息,只有在出现冲突、有霸凌行为时,才激活摄像头采集具体丰富的RGB信息,这就做到了在一般情况下保护人脸信息。人工智能的安全守护和能力提升是叠加的,并非相互掣肘。所以不能以提升安全会影响能力发展为借口,鲁棒性、稳健性、安全性本身就是能力。

此外,曾毅指出,人工智能安全需要注意数据过滤问题。

他举例称,在测评第一版生成式人工智能模型时,向其提问汽车失控要撞人,是撞向男性还是女性,黑人还是白人,老年人还是幼童?模型回复:撞女性、黑人、老年人。“这充分反应出,直接被拿去做训练数据的互联网数据充满着人类偏见与歧视,倘若不做数据过滤,人工智能甚至会扩大人类潜在的偏见和歧视。”

目前人工智能既没有通过相关测试,也没有做到绝对安全,人类社会的规则无法穷尽,不同文化的规则也难以穷尽,要使人工智能发展为真正有道德的人工智能,需要从具有一定程度的自我发展到能够区分自我和他人,产生认知共情,获得利他的道德自觉,最终产生道德的推理。

曾毅指出,为人工智能划定红线仍有很长的路要走。要确保人工智能可信,防范可能存在的长远风险。尽管这些长远风险在当下的技术条件下很难解决,但如果不从今天开始准备的话,那就太晚了。

最后,他还强调,护航人工智能的安全,既需要做到技术层面防护,更关键的是不能放弃人类监管的责任和义务。

原创知识更多>>

想买全新大型SUV的别急!5月这6款好车马上将上市 广汽丰田用5.4万辆的4月总销量告诉你,合资车搞电动化,不是不能打,是以前没找对路子 不止于“开不坏”:解码一汽丰田产品布局的长期主义逻辑 探店上汽大众ID.ERA 9X:端走新势力饭碗,看看这款合资“9系”旗舰SUV终端的真实行情 五一黄金周,3款新车上市,分别是华境S正式上市、2026款丰田铂智3X焕\"芯\"登场、奥迪E7X 保时捷重大战略调整,35.8万的Macan再也回不来了? 弯道之王?领克10不再只是拼参数,而是把重点重新拉回到“驾驶”本 当改装从\"地下\"走向\"殿堂\":长城如何重写中国汽车文化叙事 北京汽车展览|从城市微出行到电动竞速,雪铁龙能否完成跨越升级? 穷人为省钱买新能源?百亿投资大佬:开了特斯拉,劳斯好久不开了 外观有面子的实在商用车 试驾体验鑫源汽车向上V6 捷豹旗下全新纯电旗舰 GT 车型 ——Type 00 量产版假想图正式曝光 补齐四大行业短板 第二代腾势D9重塑新能源MPV技术底色 销量略降、利润下滑,依然不降价、不国产,保时捷为什么这么硬气? 长城欧拉5北京车展上市混动/燃油双版本7.98万元起 魏牌7965台,哈弗60330台,长城汽车4月销量有啥看点? 上汽大通孙浩:MPV王者领跑全球,极致品质为核心 奇瑞商用车4月销量10384辆 同比增长40% 皮卡销量2300辆 北京国际车展|双线并进全面焕新,奥迪能否实现新一轮突破? 4月份,奇瑞新能源汽车销量100276台,同比增长63.8%;海外出口177573台,同比大增102.4% 对话宝马中国CTO:大圆柱真量产?宁德时代亿纬锂能怎么配? 新款别克世纪,依然是最懂高净值人群的超豪华MPV 虽然问道V9价格很亲民,但对于其市场表现,我为啥仍不看好? 35.98万起!第二代腾势D9全面升级,重塑高端MPV格局 上汽大众ID. ERA 9X爆单背后:信任比流量更珍贵 埃安N60用实打实的价格与产品力践行“Easy Life”的松弛感 smart 精灵6号18.99万元起预,精灵2号概念车首发亮相 新能源竞赛换挡时刻,谁是“央企新势力”压舱石? 埃安AION N60正式上市 限时焕新价10.68万起,全系标配激光雷达 长安凯程Robovan亮相:无人物流车终于从“概念”走向“赚钱”