突破智能边界：Sutton揭示持续学习的重要性，深度学习只是昙花一现

原标题：强化学习之父Sutton最新万字采访：炮轰深度学习只是瞬时学习，持续学习才是智能突破的关键
文章来源：人工智能学家
内容字数：26652字

Rich Sutton教授对人工智能研究的见解

在最近的播客中，加拿大阿尔伯塔大学的机器智能研究所与强化学习专家Rich Sutton教授进行了深入交流，探讨了人工智能（AI）研究的未来方向和当前的挑战。Sutton教授强调，AI研究需要重新聚焦于“持续学习”的能力，而非仅仅追求在特定数据集上的性能表现。

1. 持续学习的重要性

Sutton教授指出，现有的深度学习技术过于关注“瞬时学习”，即在训练完成后将模型固定，缺乏适应变化环境的能力。他认为，持续学习能够让AI系统在实际应用中不断学习和调整，而不是仅仅停留在训练阶段。

2. 反向传播与学习目标的重新思考

尽管反向传播算法在非线性映射方面取得了成功，Sutton认为这牺牲了系统的持续学习能力。他呼吁研究者重新思考学习的目标，关注如何实现持续的非线性学习，强调简单、通用的方法比复杂的领域特定方法更具优势。

3. 奖励假说与智能的本质

Sutton教授提出“奖励假说”，认为所有目标追求都可以理解为最大化一个外部接收到的标量信号。他认为，复杂的高层次目标（如获得博士学位、建立家庭等）都是为了优化这个基础目标。这种观点可能会让人感到不适，但他认为这恰恰表明我们正在接近理解智能的本质。

4. 研究方法的建议

Sutton教授建议研究者保持日常的写作习惯，记录并发展自己的想法，同时对流行趋势保持中立，专注于真正重要且有潜力的问题。他倡导选择未被解决的问题进行研究，而不是追逐已经成功的领域。

5. 未来的展望

教授预测，未来几十年内我们将逐渐理解智能的本质，这将深刻改变人类对自身的理解，并带来技术和社会的深远影响。他相信，理解智能的过程将带来重大的科技变革，促进教育和社会发展的变革。

总之，Rich Sutton教授在此次访谈中提供了深刻的见解，强调了持续学习的重要性和对AI领域未来发展的期待。他的观点不仅为AI研究者提供了新的方向，也为理解人类智能的本质提供了重要的启示。

联系作者

文章来源：人工智能学家
作者微信：
作者简介：致力成为权威的人工智能科技媒体和前沿科技研究机构