来自之前的视频

这是之前一期视频里的内容——此后 AI 服务的界面和功能可能已经有所变化,但其中的思路和方法依然适用。

屏幕共享:

🔍 Gemini 中的屏幕共享是什么?

这是一种模式,你可以:

  • 在浏览器窗口中开始共享屏幕,
  • 展示某个应用、网站或文档的界面,
  • 并实时获得 AI 的即时提示、讲解和帮助。

🔧 该模式基于 Project Astra 构建——这是 Google 推出的一项计划,旨在打造一个主动、专注、能看、能听、能理解周围环境的 AI。


💼 使用场景

🎨 设计与动画

你展示 Figma 或 After Effects 的界面,然后提问:

Suggest how to simplify the colour palette and add motion to the animation

AI 能看到你的屏幕,并给出具体的操作建议:调整图层、结构、字体。

🧾 配合 Obsidian 使用

你展示自己的笔记结构:

How can I visually simplify this map? What can be automated?

Gemini 会分析这些内容块,并推荐插件或 Templater 命令。

🧑‍💼 处理文档

你展示一份 Google 文档:

What's unclear in this section? How can I simplify the explanation for schoolkids?

AI 会帮你改写、提炼要点,并给出示例。


🔐 隐私与安全

  • 屏幕只会在你的当前会话中共享
  • Google 不会保存这些内容(除非你另外授权)
  • 你可以随时暂停或停止共享

🤖 语音与手势集成(Astra)

在 Project Astra 的框架下,Google 正在测试: *Astra 目前尚未公开提供。

  • 实时理解语调和语音
  • 对手势、鼠标、动作做出反应
  • 在你还没问完时就给出回答(直觉式帮助)

这让与 AI 的互动尽可能接近真正的导师。


⚠️ 缺点与限制

  • 目前还不能在所有国家或所有设备上使用
  • 当画面中移动的元素太多时,有时会丢失上下文
  • 无法开启摄像头(只支持屏幕)

继续看看?