微软全面升级Windows 11，语音交互成新亮点
微软对Win11进行升级，推出语音、视觉和任务执行三大AI功能。
10月17日，微软宣布要让每一台Windows 11电脑都成为“真正的AI PC”。通过全面升级Copilot功能，使人机交互更自然，AI表现更聪明。
微软此次升级包含三大核心功能：
●新的“Hey, Copilot”语音唤醒功能，用户可直接通过语音下达指令。
●全球上线Copilot Vision，让AI能够“看见”并理解屏幕上的内容，并提供帮助。
●预览阶段的Copilot Actions，支持AI助手直接在PC上执行任务。
这次重大升级标志着微软的战略转变：从单纯追求处理性能，转向打造智能化的对话式交互体验。微软希望让每一台Windows 11设备都成为这一新范式的载体，同时通过Copilot连接器整合Gmail等第三方服务。
01 无需动手，语音成为核心交互方式
微软官宣全面接入Copilot，Windows 11 PC将化身AI助手中心。
微软官方表示，正努力推动语音成为继键盘、鼠标之后的核心PC交互方式。随着“Hey, Copilot”唤醒功能的全面开放，用户无需点击图标，直接说出唤醒词就能开启与AI的对话。系统会以麦克风图标和提示音回应，确认处于聆听状态。结束对话也很简单，说“再见”或停止说话即可。
微软认为，这一设计降低了传统语音助手的使用门槛，是将AI带给更广泛用户的关键举措。虽然不是首次涉足语音交互领域，但微软相信，基于现代AI技术的智能助手能打破用户与电脑对话的心理障碍，变革使用习惯。微软内部数据显示，使用语音与Copilot交互的频率是纯文本输入的两倍。
02 一个能“看懂”屏幕的AI助手，安全性能也高了
Windows 11有新亮点，任务栏新增Copilot，喊一声就能召唤AI外挂。
微软正在为其AI未来图景增添关键组件——能够“看懂”屏幕的Copilot Vision。该功能已全面上线，让AI具备了真正的视觉能力，可实时分析和理解用户屏幕上的内容，并在任何应用程序中提供精准的上下文帮助。
微软此前推出的Recall功能，通过持续截屏记录用户操作以帮助回溯内容，但自发布后就陷入隐私争议。因为用户无法精细筛选或控制截图内容，所有操作都被默认记录，被认为是“监视工具”。
此次微软吸取教训，Vision采取了更谨慎的隐私保护策略。该功能默认关闭，用户需在每个会话中主动点击独特的“眼镜”图标授权，才能启动屏幕共享，类似于Teams会议中的视图共享，确保用户对隐私的完全掌控。
启用Vision功能后，系统能实时分析屏幕内容，可提供软件操作指引、协助排查系统问题，并针对屏幕显示内容进行解答。
而且，Vision的应用范围从早期的单一程序支持扩展为“桌面共享”模式，能识别并理解用户跨多个应用程序窗口的完整操作流程。
微软Copilot团队描述其工作原理：“当你共享桌面或特定窗口时，Copilot就能看到你所看到的一切，并实时与你讨论其中的内容。”
这项技术应用场景丰富，如为创意项目提建议、优化简历内容、指导玩家掌握新游戏技巧等。其“高光指引”功能很实用，能在屏幕上用视觉方式标出点击位置。
需要注意的是，Vision目前仅具备“观察”和“建议”能力，无法直接代表用户操作系统，执行操作由Copilot Actions负责。为满足不同用户习惯，微软还在开发纯文本交互模式。
03 向“智能体”演进：Copilot Actions开始接管PC
微软推出Copilot Actions模式，让AI帮忙处理单调乏味的工作。
在本次更新中，面向本地文件的Copilot Actions功能具有革命性意义，它让AI首次能在用户PC上直接执行多步骤操作任务。这标志着AI正从被动的“助手”向主动的“智能体”演进，它不再只是响应用户指令，而是能主动为用户完成工作。
这一突破让Copilot成为微软所称的“通用智能体”。现在的Copilot不仅能回答问题，还具备实际操作能力，如打开应用、输入文字、滚动页面，甚至执行复杂的多步骤任务。
用户只需用日常语言描述需求，如“帮我整理上个月度假的照片”或“从这份PDF里提取所有数据”，智能体就会尝试通过与桌面和网络应用的交互来完成任务。
当智能体在后台工作时，用户可继续专注于其他事务。更重要的是，用户始终掌握控制权，可随时查看任务进度、审查具体操作，或在任意时刻中断任务、亲自接管。
04 当Xbox遇见AI游戏伙伴 升级娱乐体验
微软此次升级不仅涉及办公或提高生产力领域，也在探索AI融入娱乐体验的方式。
例如在手持游戏设备领域，通过ROG Xbox Ally和ROG Xbox Ally X，微软将便携游戏与人工智能助手巧妙融合。
除了能快速访问Xbox、PC Game Pass及其他主流游戏商店的内容，用户现在还能直接与Copilot对话。
只需长按设备上的“库”按钮，就能唤出微软的个人游戏助手——Gaming Copilot。它能在游戏过程中实时提供攻略推荐、操作技巧与场景解读，玩家无需退出当前游戏或切换屏幕。
总之，微软正在将其AI PC定位为值得信赖的助手和伙伴。微软执行副总裁尤素夫·梅赫迪(Yusuf Mehdi) 表示：“我们希望每位用户都能体验到，拥有一台不仅仅是工具，而是真正伙伴的PC意味着什么。”
本文来自“腾讯科技”，作者：金鹿，36氪经授权发布。
本文仅代表作者观点，版权归原创者所有，如需转载请在文中注明来源及作者名字。
免责声明：本文系转载编辑文章，仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布，请及时与我们联系进行审核处理或删除，您可以发送材料至邮箱：service@tojoy.com