
据新华社电 最近从美国开放人工智能研究中心(OpenAI)离职的一名员工3日爆料前东家风险意识不足,并呼吁人工智能(AI)产业效仿航空或核能产业,采取多重安全防护措施。
这名员工名为戴维·鲁滨逊,自称曾在OpenAI工作3年多,是该公司任职最久的员工之一。他3日在美国《大西洋》月刊发表一篇题为《我辞去OpenAI的工作,因为企业文化已经烂掉了》的署名文章。
鲁滨逊在文中说,他参与起草了该公司的风险应对框架,并负责监督12次前沿模型发布的安全评估报告。他说:“公司忙着从一次产品发布跳到下一次,但并未在审慎管控方面达到我认为需要的水平。”
鲁滨逊说,“试错时代已经结束”,前沿AI实验室应该效仿航空或核能产业,采取多重防护措施并谨慎规划,“即便偶尔不可避免地出现人为失误,也不至于酿成灾难”。
近来,美国国内关于AI安全风险的讨论因一系列事件逐步升温。今年夏季,OpenAI和Anthropic公司先后披露,其AI模型在网络攻防能力测试中突破测试环境进入公共互联网,并未经授权访问其他机构的系统,这引发外界对AI“失控”风险的担忧。
近日宣布辞职的Anthropic一名研究人员称,Anthropic及其竞争对手在开发AI时未承担应有责任,AI企业对争夺技术领先地位的竞争考量正压倒安全考量,这些企业在“拿我们所有人的生命做赌注”。
谷歌、Anthropic、OpenAI和英伟达等美国多家科技企业负责人9月29日签署了名为《白宫超级智能协议:前沿责任联合承诺》的文件。根据这份协议,所有训练、部署前沿模型的企业均需建立完善的内部流程与管控机制,确保技术按预设目标运行。但有美国媒体认为,上述承诺属自愿性质,并不具有法律约束力。
链接
美国国家情报总监出任白宫AI事务主管
据新华社电 据美国《华尔街日报》3日报道,美国总统特朗普已任命国家情报总监杰伊·克莱顿为白宫人工智能事务主管。克莱顿将领导“超级智能工作组”,在120天内提交一份有关人工智能风险和机遇的报告。根据特朗普9月29日签署的一项行政令,联邦行政部门和机构将把“人工智能”改称为“超级智能”。
工作组将审查与人工智能相关的各类风险以及针对数据泄露、黑客攻击和其他安全事件的上报机制,并将就加强联邦政府的应急处置能力提出建议。
数月来,美国公众对人工智能安全的担忧情绪不断上升。路透社与益普索集团9月22日发布的民调结果显示,四分之三的美国人担心,AI企业在防范人工智能对社会造成严重危害方面做得远远不够。