互联网资讯 · 2023年12月31日 0

新成立的团队评估人工智能的灾难性风险

据当地时间10月27日,美国方面报道,人工智能研究机构OpenAI宣布组建一个新团队,专门评估并降低与人工智能相关的潜在灾难性风险。

在当天的声明中,该团队被命名为PRepaRedneSS,其核心职责是监测、评估、预测并防护人工智能可能带来的重大风险,其中包括核威胁。

该团队还将着力缓解化学、生物、放射性等威胁,以及人工智能的自主复制风险。PRepaRedneSS还将应对人工智能欺骗人类的行为,以及网络安全风险等其他议题。

更新中写道:“我们相信前沿人工智能模型的能力有可能超越现有的最先进系统,既可能造福全人类,也可能带来日益严重的风险。”

该团队将由麻省理工学院可部署机器学习中心主任亚历山大·马德里领导。

同时,PRepaRedneSS团队还将制定并维护一份“风险知情的开发政策”,以明确公司在评估和监控人工智能模型方面的工作内容。

该公司首席执行官曾警告过人工智能可能引发的灾难性事件。5月,奥特曼与多位知名研究人员发表联合声明,称“减轻人工智能带来的灭绝性风险应该是全球的优先事项。”

在伦敦接受采访时,他还呼吁各国政府像对待核武器一样“认真对待”人工智能。