未来生命研究所（Future of Life Institute）29日公布一封题为“暂停巨型AI实验”的公开信，呼吁所有AI实验室立即暂停训练比GPT-4更强大的AI系统至少6个月。
公开信中提出，广泛的研究表明，具有与人类竞争智能的人工智能系统可能对社会和人类构成深远的风险。AI可能代表地球生命史上的深刻变化，应以相应的关怀和资源进行规划和管理。不幸的是，这种级别的规划和管理并没有发生，只有当我们确信它们的影响是积极的并且风险是可控的时候，才应该开发强大的人工智能系统。这种信心必须有充分的理由，并随着系统潜在影响的规模而增加。
目前，以马斯克、辛顿、马库斯等为代表的千名科技人员均签署了这封公开信。
附：“暂停巨型AI实验”的公开信全文（译）具有与人类相媲美的智能的人工智能系统，可能对社会和人类产生深远的风险，这已经得到了大量研究[1]的证实，并得到了AI实验室的支持[2]。正如广泛认可的阿西洛马人工智能原则所述，先进的人工智能可能会给地球生命历史带来深刻的变革，因此应该用相应的关注和资源进行规划和管理。遗憾的是，即使在近几个月里，AI实验室在开发和部署越来越强大的数字智能方面陷入了失控的竞赛，而这些数字智能甚至连它们的创造者都无法理解、预测或可靠地控制，这种规划和管理的水平也没有得到实现。
当代AI系统现已在通用任务方面具有与人类竞争的能力[3]，我们必须问自己：我们是否应该让机器充斥着我们的信息渠道，传播宣传和虚假信息？我们是否应该将所有工作自动化，包括那些有成就感的工作？我们是否应该开发可能终超越、取代我们的非人类智能？我们是否应该冒着失去对文明的控制的风险？这些决策不能交由未经选举的科技来做。只有在我们确信AI系统的影响将是积极的，风险将是可控的情况下，才能开发强大的AI系统。这种信心必须有充分的理由，并随着系统潜在影响的增大而增加。OpenAI近关于通用人工智能的声明指出：“在某些时候，可能需要在开始训练未来系统之前获得独立审查，而且各个的系统训练尝试，应该就限制用于创建新模型的计算增长速度达成一致意见。”我们同意。那个时候就是现在。
因此，我们呼吁所有AI实验室立即暂停至少6个月的时间，停止训练比GPT-4更强大的AI系统。这种暂停应该是公开的、可验证的，并包括所有关键参与者。如果这样的暂停无法迅速实施，政府应该介入并实行禁令。
AI实验室和独立应利用这段暂停时间共同制定并实施一套先进的、共享的AI设计和开发的安全协议，这些协议应由独立的外部严格审计和监督。这些协议应确保遵守它们的系统在排除合理怀疑之后是安全的[4]。这并不意味着暂停AI发展，而只是从危险的竞赛中退一步，避免发展出具有突现能力的更大、更不可预测的黑箱模型。
AI研究和发展应该重新关注如何使当今强大的、处于技术前沿的系统更加、安全、可解释、透明、稳健、一致、值得信赖和忠诚。
与此同时，AI开发者必须与政策制定者合作，大力加快AI治理系统的发展。这些至少应包括：致力于AI的新的、有能力的监管机构；对高能力AI系统和大量计算能力的监督和追踪；源头和水印系统，以帮助区分真实与合成以及追踪模型泄漏；强大的审计和生态系统；对AI造成的损害承担责任；技术AI安全研究的充足公共资金支持；以及应对AI带来的严重经济和政治颠覆（特别是对民主制度）的有充足资源的机构。
人类可以与AI共享繁荣的未来。在成功创造出强大的AI系统后，我们现在可以享受一个“AI夏天”，在这个时期，我们可以收获硕果，为所有人带来明确的利益，让社会有机会适应。社会已经在其他可能对社会产生灾难性影响的技术上按下了暂停键[5]。我们在这里也可以做到。让我们享受一个漫长的AI夏天，而不是毫无准备地跳入秋天。
