CMU评测:Gemini Pro相比GPT3.5,全线溃败!代码公开可复现

AIGC动态1年前 (2023)发布 夕小瑶科技说
42 0 0

CMU评测:Gemini Pro相比GPT3.5,全线溃败!代码公开可复现

AIGC动态欢迎阅读

原标题:CMU评测:Gemini Pro相比GPT3.5,全线溃败!代码公开可复现
关键字:报告,任务,模型,作者,提示
文章来源:夕小瑶科技说
内容字数:8644字

内容摘要:



夕小瑶科技说 原创作者 | 谢年年、python前段时间谷歌DeepMind推出了号称是谷歌史上功能最强大、最通用的多模态模型Gemini 1.0!
Gemini 1.0共有Gemini Ultra, Gemini Pro, Gemini Nano三个不同版本:
Gemini Ultra——最大、最强的模型,适用于高度复杂的任务。
Gemini Pro——可扩展到各种任务的最佳模型。
Gemini Nano——最高效的设备端任务模型。
谷歌发布的测评报告称,Gemini Ultra在各种任务上超越GPT-4,而Gemini Pro据说与GPT-3.5相当。
然而,很快被网友扒出Gemini Ultra在测评时用了很多小动作,疑似“胜之不武”!存在刻意刷榜、夸大性能的嫌疑,演示视频也被扒出是“合成造假”…我们也对这一新闻进行了详细报道谷歌承认Gemini视频是“剪出来”的,想赶超GPT-4想疯了
不止Gemini Ultra超越GPT-4有作假嫌疑,Gemini Pro的性能赶超GPT-3.5也要打一个问号。
来自第三方的梅隆大学的学者对OpenAI GPT和Google


原文链接:CMU评测:Gemini Pro相比GPT3.5,全线溃败!代码公开可复现

联系作者

文章来源:夕小瑶科技说
作者微信:xixiaoyaoQAQ
作者简介:更快的AI前沿,更深的行业洞见。聚集25万AI应用开发者、算法工程师和研究人员。一线作者均来自清北、国外顶级AI实验室和互联网大厂,兼备媒体sense与技术深度。

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...