7B羊驼战胜540B“谷歌版GPT”,MIT用博弈论调教大模型,无需训练就能完成

AIGC动态11个月前发布 量子位
18 0 0

7B羊驼战胜540B“谷歌版GPT”,MIT用博弈论调教大模型,无需训练就能完成

AIGC动态欢迎阅读

原标题:7B羊驼战胜540B“谷歌版GPT”,MIT用博弈论调教大模型,无需训练就能完成

关键字:策略,生成器,模型,答案,正则

文章来源:量子位

内容字数:4743字

内容摘要:克雷西 发自 凹非寺量子位 | 公众号 QbitAI基于博弈论,MIT提出了一种新的大模型优化策略。在其加持之下,7B参数的Llama在多个数据集上超越了540B的“谷歌版GPT”PaLM。而且整个过程无需对模型进行额外训练,消耗的算力资源更低。这种基于博弈论制定的优化策略被称为均衡排名(Equilibrium Ranking)。研究团队将大模型语言解码过程转化为正则化不完全信息博弈。这个词可以拆…

原文链接:点此阅读原文:7B羊驼战胜540B“谷歌版GPT”,MIT用博弈论调教大模型,无需训练就能完成

联系作者

文章来源:量子位

作者微信:QbitAI

作者简介:追踪人工智能新趋势,关注科技行业新突破

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...