谷歌Gemini 1.5模型来了！突破100万个tokens，能处理1小时视频【附58页技术报告】

AIGC动态欢迎阅读

原标题：谷歌Gemini 1.5模型来了！突破100万个tokens，能处理1小时视频【附58页技术报告】
关键字：报告,模型,上下文,政策,窗口
文章来源：智东西
内容字数：5152字

内容摘要：

一次能处理1小时视频、11小时音频、超过3万行代码。
编译|ZeR0
编辑|漠影
智东西2月16日报道，谷歌昨夜发布其大模型矩阵的最新力作——Gemini 1.5，并将上下文窗口长度扩展到100万个tokens。
Gemini 1.5 Pro达到了与1.0 Ultra相当的质量，同时使用了更少的计算。该模型在长语境理解方面取得突破，能够显著增加模型可处理的信息量——持续运行多达100万个tokens，实现迄今任何大型基础模型中最长的上下文窗口。
这意味着Gemini 1.5 Pro可一次处理大量的信息——包括1小时的视频、11小时的音频、超过3万行代码或超过70万字的代码库。
从今天开始，谷歌将通过AI Studio和Vertex AI向开发者和企业客户提供Gemini 1.5 Pro的有限预览版。
此外，谷歌透露其在研究中还成功测试了多达1000万个tokens。
本文福利：58页《Gemini 1.5技术报告》，可在公众号栏回复关键词【智东西408】获取。
01.
基于Transformer和MoE架构，
100万个tokens上下文窗口
谷歌DeepMind首席执行官戴米斯·

原文链接：谷歌Gemini 1.5模型来了！突破100万个tokens，能处理1小时视频【附58页技术报告】