谷歌实验室宣布对其 Gemini Pro 人工智能工具进行重大升级–该工具属于中型人工智能模型，为其免费版聊天机器人提供动力–在预览版中引入了处理多达 100 万个代币的能力。它提供了前所未有的 “上下文大小”，使目前领先的工具及其 128K 的容量望尘莫及。
Gemini Pro v1.5 的升级使其理论上比 OpenAI 的付费 GPT-4 模型强大 700%，为计算语言学和机器学习的大型语言模型（LLM）树立了新的标杆。
据谷歌公司称，这一数据是 “所有大规模基础模型中最长的上下文窗口”。
“在此之前，世界上公开的大型语言模型的最大上下文窗口为 20 万个词组。谷歌实验室团队分享说：”我们已经能够大幅提高这一水平–持续运行 100 万个代币。
有了这项功能，Gemini Pro 的能力将超过目前 Gemini 系列中最强大的版本，也超过目前可用的任何其他 LLM。不过，这种情况只是为了测试目的而上线的，而 Gemini Pro 即将发布的稳定版本将处理多达 128K 的代币。
虽然与 Gemini 1.0 可处理的 32,000 个代币相比，该版本将是一个重大升级，但 100 万个代币能做什么，用户还得拭目以待。
此举是谷歌在主导人工智能行业竞赛中的最新攻势。上周，Gemini Advanced 成为 ChatGPT Plus 的第一个可靠竞争对手。与 Anthropic 的 Claude 不同，谷歌的聊天机器人是多模态的，在不同的测试中都取得了不错的成绩，而且还提供了 OpenAI 所没有的一系列功能。
不过，Gemini Advanced 将赶上 GPT-4.5 Turbo，后者已经可以处理 128,000 个代币。
通过几次演示，Gemini 1.5 的多功能性得到了生动展示。谷歌表示，它 “可以一次性处理大量信息，包括 1 小时的视频、11 小时的音频、超过 3 万行代码或超过 70 万字的代码库”。
“该团队补充说：”在我们的研究中，我们还成功测试了多达 1000 万个标记。
一个缺点： 双子座模型无法分析 PDF 文件，TCN 在比较双子座和 ChatGPT 时指出了这一缺陷。
“专家混合物 “将继续存在
Gemini 1.5 与之前版本的另一个不同之处在于使用了 “专家混合物”（Mixture of Experts）技术，Mistral AI 也采用了该技术来制作更轻量级的模型。Mistral AI 的入门者功能强大，足以击败 GPT 3.5，跃居最佳开源 LLM 的前列。
“（Mixture of Experts）将你的请求路由一组较小的’专家’神经网络处理，因此响应速度更快，质量更高。”谷歌在公告中分享道，它表示这不仅能确保响应速度更快，还能确保响应质量更高。
与 Mistral 一样，谷歌也能让自己的模型大放异彩。与 Gemini Ultra 1.0 相比，Gemini 1.5 Pro 在几项基准测试中都表现出了卓越的性能，这表明谷歌的 LLM 未来大有可为。
“谷歌首席执行官桑达尔-皮查伊（Sundar Pichai）在今天的一篇博客文章中说：”它在多个维度上都显示出巨大的改进，1.5 Pro达到了与1.0 Ultra相当的质量，同时使用了更少的计算量。
谷歌首席执行官桑达尔-皮查伊（Sundar Pichai）在今天的博文中说：”该公告没有提供发布 Gemini Advanced 1.5 的时间表。与此同时，OpenAI 正在积极开发 GPT-5。Gemini增强的令牌处理能力将有助于巩固谷歌在人工智能军备竞赛中的地位。
