双子座将更好地理解手机屏幕上的内容

谷歌正在更新Android 上的 Gemini，以使其人工智能更好地利用屏幕上的内容。此次更新应该让 Gemini 能够利用其最佳用例之一，帮助您在日常生活中理解一组有限的数据。

如果您将 Gemini 设置为 Android 手机上的默认助手，它已经可以总结或回答有关网页或屏幕截图的问题。很快，它还将能够判断您的屏幕上是否有视频，并提示您提出有关该视频的问题。双子座使用视频的自动字幕来寻找答案——你已经可以用更迂回的方式让它做到这一点。

如果您正在查看 PDF，Gemini 也会采取类似的提示，但有一个问题：您需要访问 Google 的付费版本 Gemini Advanced 才能使用它。这是因为该功能会摄取整个 PDF，因此需要 Gemini Advanced 订阅者可以使用长上下文窗口。但是，一旦它采用了 PDF，您基本上就将其变成了该主题的专家 - 也许是您的洗碗机用户手册或当地的路边回收指南。 Gemini Advanced 是每月 20 美元的Google One AI Premium 计划的一部分。

还有一个小更新 - 您很快就可以将 Gemini 生成的图像拖放到您正在处理的任何内容中，而无需在应用程序之间跳转。您只需长按 Gemini 叠加层中的图像并将其拖到聊天或电子邮件中即可。总而言之，它的最终效果是让双子座感觉不再是你必须去得到的东西，而是与系统其他部分无缝集成的东西。

这也提醒我们，十多年来，谷歌一直在追求上下文感知搜索的梦想——还记得 Google Now吗?我认为这是一个显着的进步;我遇到的 Gemini Assistant 的最佳用途是让它记住晚餐食谱，这样我在厨房做饭时就可以向它提问。听起来很简单，但对我来说，这比向人工智能询问整个互联网上的所有知识更实际有用。

谷歌的 Android 版 Gemini 更新将在“未来几个月内推广到数亿台设备”，并且更多的上下文功能正在开发中。