图灵奖得主强化学习奠基人Richard Sutton 智源大会演讲：AI 步入“经验时代”

近日，在第七届智源大会上，强化学习奠基人、图灵奖得主 Richard Sutton与深度学习奠基人 Yoshua Bengio 双星交汇， 同台对话，各自围绕 AI 的未来展开阐述，Richard Sutton发表了题为“Welcome to the Era of Experience（欢迎来到经验时代）”的主旨演讲，深入探讨了人工智能（AI）的未来发展方向，并引发了与会者的广泛关注和讨论。

Sutton 在演讲中明确指出，AI 的未来不应再局限于模仿人类的知识输出，而应迈向一个能自主学习、主动探索、通过第一手经验成长的新时代。他强调，AI 正在从“人类数据时代”步入“经验时代”，智能体需要主动参与世界，通过感知、行动、试错来积累经验。

Sutton 以 AlphaGo 为例， AlphaGo 之所以能下出第37手—“神之一手”，就是因为它通过自我对弈，形成了人类未曾教授的理解，正是经验学习的典范。他表示，这种通过自我博弈和试错积累的经验，是 AI 真正实现创造力和适应能力的关键。

然而，Sutton 也表达了对“过度控制 AI”的担忧。他认为，不能以“安全”为名限制 AI 的行为能力、本体动机或主动性。这一观点与同场演讲的深度学习奠基人 Yoshua Bengio 所强调的 AI 安全理念存在本质分歧，但两者都指向了对人类与智能共生未来的深切关怀。

在演讲中，Sutton 还回顾了 AI 的发展历程，从模拟时代到人类数据时代，再到即将到来的经验时代。他强调，经验时代将是 AI 与现实世界深度交互的时代，AI 将通过与现实世界的互动来获取数据，不再只依赖人类提供的静态信息。

此外，Sutton 还提出了“去中心化合作”的概念。他认为，在一个由智能体组成的社会中，每个智能体都应有自己独立的目标，并通过互动实现彼此部分的目标。这种去中心化合作的方式比中心化架构更优雅、鲁棒、可持续且灵活，能更好地抵御作弊者、边缘分子和异类的干扰。

Sutton 对 AI 的未来充满希望，认为超级智能体和增强型超级智能人的出现将为世界带来积极的正面影响。但他也指出，要实现这一愿景，还需要更加先进的深度学习算法，具备持续学习和元学习的能力。

此次演讲不仅展现了 Sutton 对 AI 未来发展的深刻洞察，也引发了参会者对 AI 安全、伦理及社会影响的深入思考。智源大会作为 AI 领域的重要盛会，再次证明了其在推动 AI 技术发展和思想交流方面的重要作用。

演讲回放地址：https://event.baai.ac.cn/live/929

内容中包含的图片若涉及版权问题，请及时与我们联系删除