Gemini Live 与 Pixel AI:Matthew Berman 解读 Google 2024 年发布会

原标题Gemini Live and Pixel AI: Matthew Berman Reviews Google’s 2024 Event

回顾 Google 的语音助手和端侧 AI 演示,包括一次经过多次尝试才成功的现场演示。

MBMatthew Berman主持 · Matthew Berman
频道
Matthew Berman
发布
2024年8月14日
视频
24:18
阅读
5 分钟
幻灯片
2
原文
英语
在 YouTube 打开
往下滚动阅读时,视频会缩到右下角继续播放。字幕跟随阅读语言。
阅读语言共 2 种语言可读
由 AI 从英语原文翻译。打开“对照原文”可以逐段核对。
摘要

30 秒看懂

2024 年 8 月,Matthew Berman 解读 Google 的 Gemini 和 Pixel 发布内容,并将现场演示与自己有好有坏的使用体验作对比。他介绍 Gemini Live、端侧处理、Pixel Studio 图像生成和 Add Me 照片合成,也指出现场日历演示出现的故障。

  1. 1经过重试的现场演示海报和日历请求失败两次后,演示者在另一台设备上获得了结果。
  2. 2Gemini LiveGoogle 演示了可打断的语音对话和声音选择;Berman 计划亲自测试。
  3. 3端侧 Gemini NanoGoogle 介绍了 Pixel 9 上的多模态模型,并称输出速度最高可达每秒 45 个 token。
  4. 4Pixel Studio发布会展示了用端侧与云端组件生成和编辑派对邀请函。
  5. 5Add Me通过引导拍摄并合成两张照片,摄影者也可以出现在合影中。

要点建议

  1. Google 展示了 Gemini 在应用、Android 和智能家居中的多种用途。
  2. 发布会称某些敏感任务可在设备上处理,其他请求则使用云服务。
  3. 现场的海报与日历演示失败两次后,换设备才获得结果。
  4. 演示中的 Pixel Studio 结合了端侧和云端图像生成组件。
  5. Add Me 将分开拍摄的照片合成一张合影。
全文

按章节阅读整理后的全文

只看原始文稿
01

Gemini 与 Google 生态

Berman 讨论自己的模型测试、应用集成、智能家居示例以及端侧处理的吸引力。

Matthew Berman 解读 Google 2024 年 8 月 Made by Google 发布会上的 AI 公告。他播放部分演示片段并加入自己的看法,重点关注 Gemini 集成、语音交互和 Pixel 功能。

Berman 说,他自己对 Gemini 1.5 Pro 及其实验版本的测试结果令人失望,也曾遇到 AI Studio 回答中途截断的问题。Google 引用了排行榜结果,但他更看重自己的实际测试。他的体验和展示的基准属于不同类型的证据。

他认为 Google 的优势在于 Android 硬件生态和广泛使用的应用。他设想助手可以跨服务代办任务,同时看好端侧模型可能降低延迟、减少发送到外部的数据。

Google 介绍了 Search、Docs、Gmail 和 Chrome 中的 Gemini 功能。Berman 觉得邮件线程摘要和 Sheets 公式建议有帮助,但说自己尚未大量使用这些集成。他也试过 Android 上的 Gemini,认为有用但并不完善。

一个智能家居演示询问是什么弄坏了菜园,并检索出相关摄像头片段。Berman 认为这个功能令人印象深刻,同时指出其隐私影响。Google 还介绍了用于端侧体验的 Gemini Nano 模型。

Google 介绍 Android 上的 Gemini,并称某些敏感任务可在设备上处理,其他复杂请求则使用 Google 云服务。Berman 喜欢本地处理,预测小模型将承担大部分任务,较困难的问题留给云端;这一比例是他的预测。

02

助手操作与现场演示

他将自己的 Android 使用体验与一场经过多次尝试的海报及日历演示作比较。

Berman 说,自己的 Android 助手有时拒绝控制灯光,尽管之前的 Google Assistant 可以完成。他欣赏新增的语言能力,但认为熟悉的操作消失或变得不可靠是实际缺点。

现场演示中,一位演示者拍摄演唱会海报,要求 Gemini 检查日历是否有冲突。请求失败两次后,演示者换了一台设备,最终得到了结果。Berman 既看到视觉信息与日历结合的潜力,也看到复杂现场工作流仍有不完善之处。

演示者随后设置提醒并更新购物清单。Berman 说,自己此前使用提醒功能曾多次失败。他还提到一个不便:自己更喜欢 iPhone,却把大量数据保存在 Google 应用中。

03

Gemini Live 与 Pixel 硬件

Google 演示语音对话,并介绍 Pixel 9 上的 Gemini Nano。

Google 介绍 Gemini Live,称这是一种可以打断和转移话题的语音对话模式。Berman 将此次发布与 OpenAI 的语音演示作比较,并提出发布时间的差异是否反映了测试差异;他没有提供能够确定这一点的证据。

Gemini Live 声音选择
幻灯片 1 / 2Gemini Live 声音选择发布会演示了在开始语音对话前选择声音。

发布会展示了声音选择,以及一段关于儿童教育活动的对话。Berman 喜欢回答延迟,但认为演示的声音不如 GPT-4o 语音演示自然。这是他对发布会的个人印象,并非受控比较。

Berman 说 Gemini Live 在发布会当天推出,并计划亲自测试。随后发布会转向 Pixel 9 和 Google 的 Tensor G4 芯片,介绍其为端侧 AI 所做的设计。

Google 称 Pixel 9 运行多模态 Gemini Nano,并展示了最高每秒 45 个 token 的输出速度。Berman 欢迎这种硬件和本地模型组合,但希望先测试实际表现再下结论。

Google 宣称的端侧速度
幻灯片 2 / 2Google 宣称的端侧速度发布会展示的输出速度最高可达每秒 45 个 token。
04

Pixel 应用与合成照片

发布会展示天气摘要、Pixel Studio 和 Add Me,促使 Berman 思考功能的实用性及照片与现实的关系。

Pixel 天气演示生成了一段自然语言天气报告。Berman 质疑在这个任务中,一段文字是否比可视化天气界面更有用。Google 还提到垃圾来电功能;他指出这并不完全是新功能。

Pixel Studio 演示使用端侧扩散模型和云端 Google Imagen 3 生成图片。演示者制作海滩派对邀请函,加入金门大桥和烟花,并改变视觉风格。Berman 喜欢演示中展现的速度和灵活性。

发布会还展示了 Add Me:一人先拍摄合影,再与摄影者交换位置,手机将两次拍摄合成。增强现实叠加画面帮助对齐第二张照片。Berman 认为它很实用,也思考合成图片如何让照片作为单一时刻记录的概念变得复杂。

Berman 总结说,这场发布会展示了一些有用的功能,但在他看来并非革命性进展。他期待语言模型进入手机,并计划进一步测试 Gemini 和 Apple Intelligence。他的判断与可用性描述反映的是 2024 年 8 月的情况。

同频道的其他文章

5 张幻灯片14:45EN → 简体中文
Matthew Berman· 2026年10月29日Matthew Berman 解读 Google 的 Gemini 4 Carbon 公告Matthew Berman · Forward FutureMatthew Berman 回顾 Google 公布的 Gemini 4 Carbon 基准结果、分阶段开放计划与定价,同时指出自己尚未使用该模型。Foundation ModelsBenchmarksAI cost & performance+2
7 张幻灯片21:11EN → 简体中文
Matthew Berman· 2026年10月28日Matthew Berman 实测 DeepSeek V4.1 Flash:编程、视觉与本地应用Matthew Berman · Forward Future从视觉编程、图像推理到本地应用和服务商价格,实测既展示了模型的能力,也暴露出明显缺陷。编程智能体Multimodal AILocal inference+2
12 张幻灯片34:21EN → 简体中文
Matthew Berman· 2026年10月27日Matthew Berman 解读 Anthropic 的上市文件、AI 增长与治理Matthew Berman, Sam Altman · Forward Future主持人审视 S-1 中的财务指标、算力战略和投票结构,并质疑 AI 快速发展与安全之间的张力。AnthropicAI Safety企业 AI+2
0:26EN → 简体中文
Matthew Berman· 2026年10月25日Sam Altman 谈 AI 世界中的人类价值与问题解决Sam Altman · OpenAI在一段简短的访谈摘录中,Altman 思考解决难题的乐趣,以及人在解读结果时的作用。Human-AI CollaborationFuture of WorkAI Strategy
2 张幻灯片0:36EN → 简体中文
Matthew Berman· 2026年10月25日Kimi K3.1 与魔方求解演示Matthew Berman · Forward FutureMatthew Berman 展示一个被打乱的虚拟魔方如何复原,并对 Kimi K3.1 的测试给予积极评价。评估编程智能体Open-weight models
2 张幻灯片0:21EN → 简体中文
Matthew Berman· 2026年10月24日AI 生成的 Kimi 基准图表使用了虚构分数Matthew Berman · Forward FutureMatthew Berman 要求生成一张 Kimi K3.1 Pro 基准图表,随后发现图中的数字只是示意性占位值。Benchmarks评估Generative media