美议员提出重磅法案：政府出台安全防护机制前，AI 不得进行递归式自我改进

美议员提出重磅法案：政府出台安全防护机制前，AI 不得进行递归式自我改进

感谢网友 咩咩洋 的。9 月 30 日消息，当地时间 28 日，据美国 CNBC 报道，代表硅谷选区的民主党联邦众议员罗 · 康纳准备提出一项 AI 监管法案，引入严格责任标准，并禁止 AI 在缺乏政府安全防护机制的情况下进行递归式自我改进。康纳在接受采访时坦言：“事实上，存在文明灭绝的风险。既有失去控制的安全风险，也有被滥用的风险，两者都必须认真对待。”康纳将法案命名为《Human Control Over AI Act（人类控制 AI 法案）》。联邦政府建立防护规则且监管机构批准有关活动前，AI 模型不得递归式自我改进，也不得自主修改自身的核心目标、遏制机制或关停控制。法案还计划设立一个新的联邦机构，负责制定 AI 安全监管规定，通过许可制度审批模型训练和部署，对前沿 AI 模型开展审计，并制定安全标准，确保模型持续接受测试并处于有效的人类控制之下。每家前沿 AI 实验室还必须配备独立审计人员，由审计人员直接向新机构报告。新机构还将制定多项标准，涵盖沙盒测试环境、让测试环境与互联网断开的物理隔离、紧急关闭开关，以及防止模型脱离实验室环境后在互联网上自行运行的控制措施。前沿 AI 实验室使用的先进芯片也将纳入监管，包括建立监测或控制芯片使用的机制。据了解，法案还将为 AI 出现问题的情形增设法律处罚。部署 AI 模型如果导致平民群体遭到毁灭，将被列为“危害人类罪”并追究刑事责任。AI 公司员工如果停用防护措施、紧急关闭开关、日志记录功能或遏制系统，或者明知某套系统未经授权仍予以部署，同样将面临刑事处罚。此外，AI 公司还必须持有覆盖范围广泛的责任保险，才能发布模型。康纳称，法案是迄今提出的“最全面的 AI 安全立法”，其设计主要来自他与多家独立非营利 AI 安全组织的交流，而非大型 AI 公司高管提出的诉求。