对话谷歌科学家:智能体是大模型落地重点,AI的未来是大小模型协作
AI开发范式的关键不是数据而是模型。
原标题:对话谷歌科学家:智能体是大模型落地重点,AI的未来是大小模型协作
文章来源:Founder Park
内容字数:13740字
强化学习与大模型AI:一个全新阶段
本文总结了Google DeepMind资深研究科学家Nenad Tomasev和谷歌旗下Kaggle CEO D. Sculley在2024极客公园创新大会上关于强化学习、AI开发社区和行业发展趋势的观点。
1. 强化学习赋能AI的“超人级”能力
AlphaZero的成功案例证明了强化学习的潜力,它通过自我博弈超越了人类在国际象棋领域的水平。强化学习的应用远不止于此,它在保障生成式AI和大语言模型的安全性和可控性方面也发挥着关键作用。Nenad指出,AlphaZero的意义在于其持续自我改进的循环,使其能够生成自身数据,不受限于人类知识。虽然AlphaGo也使用了强化学习,但其起点是基于人类数据,而AlphaZero则实现了“从零开始”。
2. 智能体和多模态整合是未来的重点
Nenad认为未来的AI发展方向是构建拥有多种能力的智能体,由多个组件组成,根据不同情况展现不同行为。强化学习将在此发挥重要作用,帮助智能体在正确环境中调用合适的组件。多模态融合也是关键,将不同模态信息(文本、图像、音频等)连接起来,让模型更好地理解概念和语言,实现真正的智能。此外,规划和推理能力的提升,以及解决更复杂任务的能力也是未来的重点。
3. AI开发范式转变:模型主导而非数据主导
D. Sculley指出,AI开发范式已从过去的数据主导转变为模型主导。现在,开发者更倾向于先选择一个大型预训练模型(如GPT、Gemini),再通过提示词工程、数据补充、微调等方式进行调整,而非从收集大量数据、训练简单模型开始。这种转变颠覆了传统的开发流程,也对开发者和企业提出了新的要求。
4. 小团队也能参与AI浪潮
D. Sculley认为,即使是小团队和研究者,也能利用现有的强大预训练模型,通过创新方式进行应用和拓展,从而参与到AI浪潮中。这打破了以往只有大公司才能在AI领域取得突破的预测。
5. 未来:大小模型协同工作
D. Sculley预测,未来AI系统将由多个模型或智能体协同工作,而非单一大型模型主导一切。大型模型负责处理复杂任务,小型模型则负责特定任务的验证和控制,两者协同完成任务。这种大小模型配合的方式将更加高效和实用。
6. AI人才需求和岗位定义的转变
随着大语言模型的兴起,对擅长与大语言模型交互,进行提示词工程和模型调优的人才需求剧增。企业需要找到方法来评估和管理这些新型人才,并认可他们在公司中创造的价值。
7. 给年轻人的建议
D. Sculley建议年轻人不要等待,立即开始实践,动手尝试模型、开展项目,探索技术的极限。积极参与到AI社区中,将有助于在这一快速发展的领域中取得成功。
联系作者
文章来源:Founder Park
作者微信:
作者简介:来自极客公园,专注与科技创业者聊「真问题」。