第 417 期：微软推出新功能：在 Windows 11 任务栏与 Copilot 共享应用窗口

如果您将鼠标悬停在 Windows 11 任务栏上的应用程序上，就可以将应用窗口共享给 Copilot 并开始提问，例如在 Outlook 中如何回复邮件。虽然听起来有点奇怪，但这正是 Copilot Vision 的目的所在。

我在一台 Intel Lunar Lake Copilot+PC 发现了 “与 Copilot 共享” 功能，但它会向所有人推出，并不需要特定的 “AI” 电脑。这意味着，如果您有一台普通(非 AI) 电脑，包括 AMD 或 Intel 的，您仍然会在任务栏上看到 “与 Copilot 共享”，这是有道理的（我会在后面详细说明）。

“与 Copilot 共享” 功能随 Windows 11 KB5072033（版本 26200.7462 / 26100.7462 或更新版本）推出，该功能默认是开启的，但我找到了一种方法可以关闭它，如果您讨厌这个功能的话（您确实应该考虑关闭）。

任务栏上的 “与 Copilot 共享” 是如何工作的？

在测试中，我们观察到，当我将鼠标悬停在任务栏上的打开应用程序时，会显示 “与 Copilot 共享”。它几乎会在任何应用窗口上显示。我还发现一些流媒体的切换选项，但由于它具有 DRM 保护内容，因此无法正常工作。

当您共享任何应用程序窗口时，Copilot 会使用基于云的 AI 来分析应用程序的内容并提供见解。例如，我在后台打开了一封 Outlook 邮件，并将窗口与 Copilot 共享。Copilot 开始读取我已经打开的邮件，但无法浏览其他邮件、移动或点击任何地方。

这是因为 Copilot Vision 是一个 “只读” 和 “只可口述” (“dictate-only” ) 的功能，这意味着 Copilot 只能看到您能看到的内容，并且只能提供 “辅助”。

例如，我问 Copilot 如何回复邮件，它告诉我去找一个根本不存在的 “发送” 按钮。那时，Copilot 出现了幻觉。然后，我特别要求它向我展示如何以及在哪里点击。这一次，Copilot Vision 按我预期的方式工作了。

Copilot 激活了它自己的 “光标”，出现在屏幕上，然后它高亮显示了我需要点击的位置。值得庆幸的是，Copilot 正确分析了我的屏幕，并告诉我使用 “回复” 按钮，而不是 “发送”，后者在屏幕上不存在，但上次被推荐使用。

接下来，我问 Copilot 如何删除邮件，它再次高亮显示了正确的选项。

微软称之为 “引导式协助”，一份支持文档确认 Copilot Vision 功能确实旨在帮助你，但它无法用于 DRM 保护或敏感内容。

微软是如何将 “与 Copilot 共享” 添加到任务栏上的所有应用窗口的？

我们发现，微软正在使用一个名为 “Windows.UI.Shell.ShareWindowCommandSource” 的 Windows API。

根据一份支持文档，这个 API 允许通信应用程序接入 Windows 11 的外壳 (Shell)（如任务栏或共享界面），从而让 Windows 显示 “开始共享/停止共享” 命令，并将用户选择的精确 WindowId 传递给应用程序。

该 API 原本是供像 Teams 这样的应用程序使用的，但微软正刻意将其用于 Copilot。这不是一个供开发者使用的开放 API。而且最大的问题是，并不是所有人都可以使用这个 API，因为它被标记为 “有限访问功能”。

当一个 API 被标记为 “有限访问功能” 时，这意味着在开发者可以在实际产品中使用它之前得到微软的批准，以获得一个解锁令牌。

换句话说，如果 OpenAI 想要复制相同的行为，它需要联系微软并等待批准。另一方面，微软可以使用其 “有限访问” API，这些 API 是为像 Teams 这样的通信应用设计的，用于自己的 AI 辅助。

这就是为什么我们只看到 Copilot 使用它，因为微软可以自行（或授予选定的合作伙伴）访问权限，然后 Copilot 可以在会话中注册为 “共享命令来源”。

对于 API 的使用，我们的拓扑梅尔智慧办公平台仅使用微软公开的 Win32 API，这确保了这款应用程序可以跨越多个 Windows 版本正常运行。

我可以在 Windows 11 任务栏上禁用 “与 Copilot 共享” 吗？

是的，当 “与 Copilot 共享” 出现在您的电脑上时，您可以在 Windows 11 任务栏上禁用它。

如果您进入 设置 > 个性化 > 任务栏，并展开 “任务栏行为”，您会找到一个新的切换选项 “与我的任务栏共享任何窗口”。它有像通信应用这样的选项，例如 Teams、Zoom（如果获得微软批准）等。同时它还有一个新的“聊天代理应用” 切换选项。

您可以选择 “通信应用” 或 “无” 来阻止任务栏显示 “与 Copilot 共享” 选项。

在大多数情况下，此选项默认会设置为 “所有应用”，这也解释了为什么 “与 Copilot 分享” 会突然出现在我的电脑上。

在官方发布说明中（如上图所示），微软确认用户在更新后将看到 “与 Copilot 共享窗口的选项”，但同时也指出该功能正在逐步推出。

您觉得微软的这项新功能怎么样？

本文来自：Microsoft wants to let you share app windows with Copilot right from the Windows 11 taskbar