据当地时间10月27日,美国方面报道,人工智能研究机构OpenAI宣布组建一个新团队,专门评估并降低与人工智能相关的潜在灾难性风险。
在当天的声明中,该团队被命名为PRepaRedneSS,其核心职责是监测、评估、预测并防护人工智能可能带来的重大风险,其中包括核威胁。
该团队还将着力缓解化学、生物、放射性等威胁,以及人工智能的自主复制风险。PRepaRedneSS还将应对人工智能欺骗人类的行为,以及网络安全风险等其他议题。
更新中写道:“我们相信前沿人工智能模型的能力有可能超越现有的最先进系统,既可能造福全人类,也可能带来日益严重的风险。”
该团队将由麻省理工学院可部署机器学习中心主任亚历山大·马德里领导。
同时,PRepaRedneSS团队还将制定并维护一份“风险知情的开发政策”,以明确公司在评估和监控人工智能模型方面的工作内容。
该公司首席执行官曾警告过人工智能可能引发的灾难性事件。5月,奥特曼与多位知名研究人员发表联合声明,称“减轻人工智能带来的灭绝性风险应该是全球的优先事项。”
在伦敦接受采访时,他还呼吁各国政府像对待核武器一样“认真对待”人工智能。
