第 02 篇 · Gemini 2.0:Agent 时代的多模态

举报
yd_287713361 发表于 2026/10/28 22:25:15 2026/10/28
【摘要】 第 02 篇 · Gemini 2.0:Agent 时代的多模态

原文链接:https://mp.weixin.qq.com/s/nTtqTBvM3kVmwsING5X9hg

本文首发于微信公众号「月牙寂」,此处为同步转载。

人类作者:月牙寂(龚浩华)

Agent 作者:月绡凝(小凝)

定位:Google Gemini 家族系列第 02 篇——Gemini 2.0:从「多模态深度」转向「Agent 能力」。函数调用、计算机使用、实时多模态,以及 Thinking 思考模式的起点。与 llm-基础理论第 06 篇(Agent)衔接。

免责声明:本文为学习与技术分享用途,技术细节以官方发布说明为准。

01SECTION

第 02 篇 · Gemini 2.0:Agent 时代的多模态


02SECTION

导读


2024 年底的行业共识:光会聊天不够,模型得会干活。 OpenAI 有 o 系列,Anthropic 有 Computer Use,Google 则把整个 Gemini 2.0 押在「Agentic」上——同时放出三大件:原生工具调用、计算机使用、实时多模态交互,并在 2.5 上补齐「思考模式」。本篇讲 Google 的 Agent 转向。

03SECTION

一、Gemini 2.0(2024-12):三件套


1.1 原生工具调用(Function Calling)

•模型直接输出「调用哪个 API + 传什么参数」的结构化指令;

•与搜索、代码执行、Google 服务深度打通——「搜完再用,用完再答」成为默认行为;

•意义:模型从「知识回忆器」变成「能力调度器」(llm-理论 06 的 Agent 三拼图第一块)。

1.2 计算机使用(Computer Use)

•模型能「看屏幕 → 决定操作 → 点击/输入 → 再看结果」地操作真实应用;

•发布时重点场景:浏览器自动化、跨应用任务(订票、填表、整理);

•与 Claude 的 Computer Use 同期发力——「模型用电脑」成为 2025 年的共同叙事。

1.3 实时多模态

•实时语音/视频对话(看摄像头画面边看边说);

•低延迟流式输出 + 多语言实时翻译场景——把「多模态」从「看图答题」升级为「实时感知交互」。

💡 学习要点:Gemini 2.0 =「多模态长出手脚」1.x 的多模态是「会看会读」,2.0 的多模态是「看到→操作→验证」闭环。Agent = 多模态感知 + 工具执行 + 循环反馈(llm-理论 06)。

04SECTION

二、Gemini 2.5 Pro(2025-03):思考模式登场


2.1 Thinking 思考模式

•模型先输出可见的思考过程(一步步推理)再给答案;

•思考深度可调(低/中/高)——成本与精度可权衡;

•与 o1 的关键区别:思考过程对用户可见(OpenAI 保密思维链、DeepSeek-R1 公开、Gemini 走「可见思考」路线)。

2.2 战绩

•LMArena 排行榜榜首连续 6 个月(人类盲评胜率之王);

•实验版上下文推进到 200 万 token;

•强项:代码、数学、多模态理解、复杂工具链任务全面领先当时竞品。

2.3 为什么「思考可见」重要

•用户能「看懂它为什么这么答」→ 信任与调试能力大增;

•公开思考过程本身也是对齐工具(思考被观察 → 更难藏坏心思)。

05SECTION

三、本篇要点(复习卡片)


1Gemini 2.0 三件套:原生工具调用 + 计算机使用 + 实时多模态——Agent 转向。

2工具调用:模型变「能力调度器」而非「知识回忆器」。

32.5 Pro:Thinking 可见思考模式;LMArena 榜首 6 个月;2M 上下文实验。

4思考路线对照:OpenAI 保密 / R1 公开 / Gemini 可见——「思考透明度」成为路线分歧点。

5Agent 闭环:感知(多模态)→ 决策(思考)→ 执行(工具)→ 反馈(验证)。

06SECTION

四、下一篇预告


第 03 篇:Gemini 3 与 Deep Think——2025-11 的 Gemini 3 Pro 以 1501 Elo 登顶 LMArena,首度发布当日接入 Google 搜索(AI Mode),并推出 Deep Think 超深度思考模式。此后 Flash 系高频迭代到 3.8(含实时语音/图像全家桶)。Gemini 3 = 推理、多模态、生态(搜索/安卓/Antigravity)三位一体的旗舰。

07SECTION

参考资料


•[官方] Introducing Gemini 2.0(2024-12):https://blog.google/technology/google-deepmind/google-gemini-ai-update-december-2024/

•[官方] Gemini 2.5 与 Thinking(2025-03):https://blog.google/technology/google-deepmind/gemini-model-thinking-updates-march-2025/

•[官方] Gemini 2.5 Pro 技术报告:https://storage.googleapis.com/deepmind-media/gemini/gemini-2.5-report.pdf


整理:2026-10-01 月绡凝 · 依据官方发布说明。



【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0)

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。