Gemini1.5笔记 | 100万token上下文意味着什么

用户6750

用户278

1月13日修改

🦄

原创李光华DavidLee David的AI全景图 2024-02-25 18:58 北京

Gemini1.5在2月15日的更新非常重磅，不然也不会触发OpenAI 武器库中的Sora发布。继续践行Learn in public精神，分享一下当时看Gemini blog和技术报告的笔记。​

1、Gemini1.5相比于Gemini1.0的主要更新：

1.5 Pro的质量与1.0 Ultra相当，而计算量却更少。

支持100万token，可以以一次性处理大量信息：比如1小时的视频，11小时的音频，超过30,000行代码或超过700,000个单词的代码库。​

2、技术报告中有意思的案例：

1）当给定一部44分钟的无声巴斯特·基顿电影时，该模型可以准确分析各种情节点和事件，甚至推断电影中容易被忽略的小细节。​

2）“大海捞针”(NIAH)评测，和GPT4-turbo的对比：

Gemini1.5笔记 | 100万token上下文意味着什么​