没有指数级数据就没有Zero-shot！生成式AI或已到达顶峰

AIGC动态欢迎阅读

原标题：没有指数级数据就没有Zero-shot！生成式AI或已到达顶峰
关键字：模型,数据,样本,概念,人工智能
文章来源：新智元
内容字数：7015字

内容摘要：

新智元报道编辑：alan
【新智元导读】近日，又一惊人结论登上Hacker News热榜：没有指数级数据，就没有Zero-shot！多模态模型被扒实际上没有什么泛化能力，生成式AI的未来面临严峻挑战。生成式人工智能已经触及峰顶了吗？
在大模型正火的时候提这个问题，似乎不合时宜。
毕竟，随着数据和模型规模的增大、计算能力的增加，我们似乎不再怀疑拥有超强人工智能的未来。
——但是！来自University of Tübingen、剑桥和牛津大学的最新研究，用实验告诉我们：没有指数级数据，就没有Zero-shot！
论文地址：https://arxiv.org/pdf/2404.04125
换句话说，模型要想达到AGI水平，所需的训练数据量是我们无法提供的。
根据实验数据，模型未来的性能提升将越来越缓慢，最终会因为拿不到指数级的数据而触及瓶颈。
——所以，你以为大模型真的实现了zero-shot，真的在吸收和记忆的基础上，涌现了推理甚至创新，实际上都是人家见过千万次，早已倒背如流的答案。
你以为是素质教育出英才，其实人家走的是题海战术、应试教育路线。
Youtube上239万订阅的Comp

原文链接：没有指数级数据就没有Zero-shot！生成式AI或已到达顶峰