苹果这次把AI用在了最该用的地方

5分钟前

本文来自微信公众号:爱范儿,作者:发现明日产品的,编辑:肖钦鹏



五月的第三个星期四是全球无障碍宣传日,和往年一样,苹果提前公布了将随iOS 27上线的全新一批无障碍功能。



和前几年相比,今年这波新功能最大的特点就是AI的占比大幅提升,不少特性还提前透露出了iOS 27将要搭载的系统级AI能力的方向。



AI帮视障用户“读懂”眼前的世界



旁白和放大镜是iPhone经典的视力辅助功能:旁白负责朗读屏幕上的所有内容,放大镜则可以借助摄像头放大、识别描述周围的实物。而这些使用场景,刚好和苹果即将推出的Apple智能的“屏幕识别”“视觉智能”能力天然适配。



更新后的旁白功能新增了AI图像浏览器,能够给照片、账单、个人笔记这类视觉内容生成更详细的描述,用户还可以针对画面内容进一步提问,比如询问账单上的消费金额和缴费截止日期,AI会梳理内容后给出回答。



放大镜功能也同步加入了智能描述和语音提问能力,用户还能直接用语音控制功能,对着手机说“放大”“打开手电筒”就能完成操作。



针对AI可能出现的幻觉问题,苹果也在这些功能中增加了提示,告知用户不要在存在风险或危险的场景下依赖AI描述结果。



除此之外,面向阅读障碍和低视力人群的辅助功能阅读器也获得了AI升级。原本它就可以把复杂文件重新排版成更容易阅读的格式,现在它能更智能地处理科学文献这类专业复杂文本,也能更流畅地识别整合文档中的图片、表格和多列文本,还全新内置了翻译功能。





全语音操控手机终于要来了



这次苹果推出的全新语音控制功能,其实提前坐实了iOS 27上将会推出两年前就官宣过的AI版Siri。



这个新的语音控制功能,原本是为肢体障碍用户设计的,支持完全通过语音操控iPhone和iPad——不只是打开应用这么简单,还能完成点击按钮、操作控件这类精细化操作,甚至不需要用户完全准确说出按钮或文件的名称,AI就能理解并完成操作。





举个例子,用户在文件应用里说“打开橙色文件夹”,iPhone就会自动从一堆文件夹里识别出对应颜色的那一个并打开;在地图应用说“打开附近最佳餐厅指南”,手机也会自动调出对应的功能页面。



彭博社记者Mark Gurman透露,这个辅助功能本质上就是iOS 27新版Siri能力的一部分。



苹果一向不会提前官宣还没准备好的功能,这次既然已经作为无障碍功能推出,也就意味着支持全语音指令操作手机的AI Siri,这次大概率已经正式准备就绪了。



全场景AI实时字幕上线



对于听障用户来说,视频字幕是刚需,这次苹果借助AI语音识别能力,让苹果设备可以给任意视频生成实时转录字幕。



苹果介绍,这项能力完全依托设备端AI完成,音频数据全部在本地处理,不会上传到云端,支持iPhone、iPad、Mac、Apple TV以及Apple Vision Pro全产品线,用户还可以自定义字幕的字体、大小和显示位置。



目前这项功能只支持英语,而且仅限美国和加拿大地区使用,未来应该会逐步扩展到更多语言和地区。



除了自动字幕,苹果还给FaceTime开放了新的API,开发者可以把手语翻译应用接入FaceTime,给视频通话添加人工手语翻译服务。另外新增的“姓名识别”功能,还能让iPhone帮听障用户“听着”,当有人喊出用户名字时,设备会主动发送通知提醒。



更多无障碍更新覆盖全产品线



除了上面这些AI功能,苹果还推出了不少不需要Apple Intelligence就能使用的无障碍更新。



眼动操控是无障碍领域已经比较成熟的方案,而苹果借助Vision Pro的虚实结合能力,把这项能力拓展到了现实世界。针对不好操作操纵杆的电动轮椅用户,Vision Pro可以利用自身的眼动追踪系统,实现眼球操控轮椅:用户眼前会显示一个方向仪表盘,转动眼球就能控制轮椅前进转向。



iPhone上广受好评的车辆运动提示,也就是大家常说的防晕车功能,也被移植到了Vision Pro上,可以减少用户乘车佩戴头显时的晕动症反应。Vision Pro还新增了面部手势操作,可以完成轻点和系统级操作,也优化了驻留控制模式下用眼睛选择界面元素的体验。



tvOS也新增了大字体选项,方便视力障碍用户看清屏幕文字。iOS 27还对更多第三方无障碍外设做了适配优化:



  • 适配iPhone的专用助听器,可以在苹果不同设备之间更稳定地配对切换,在iOS、iPadOS、macOS和visionOS上都提供了更流畅的设置流程。



  • iOS、iPadOS和macOS现在可以连接Sony Access手柄,用户可以自定义摇杆、9个内置按键,最多还能额外添加四个外部按键或专用开关,也支持同时组合使用两个控制器。



除了软件更新,苹果还在全球Apple Store线上商城上架了Hikawa自适应MagSafe握把支架,一共有三种配色,国内售价448元。



这款握把是美国洛杉矶设计师Bailey Hikawa和多位握力不足的残障人士共同合作开发的,整体采用硅胶材质,可以通过MagSafe直接吸附在iPhone背面,能适配不同的特殊手形,降低握持手机需要的力度,同时还能当作手机支架使用。三款特殊的配色,也是开发者和合作的障碍用户共同选择的,用来传递“与众不同的骄傲”的理念。



AI给无障碍带来新可能



生成式AI崛起的这两年,行业除了扎堆推出聊天机器人,也早就开始尝试把AI用在无障碍领域:有给听障用户做的智能眼镜,能实时把对方说话转成字幕;也有给视障用户开发的AI导盲杖,能听懂语音指令完成导航。



而智能手机本身就是这些AI无障碍功能最好的载体:它本来就内置了大量无障碍功能,负责降低数字世界的使用门槛,同时又完全融入了普通人的日常生活,是最贴近用户、也最容易被AI改造的设备。



这几年我们已经能看到不少国内手机厂商在AI无障碍上发力:荣耀、华为、vivo都推出了类似AI描述场景的功能,华为还推出了小艺语言修复,尝试用AI帮助语言障碍人士重新获得更自然的表达能力。



而一直被当作无障碍领域标杆的苹果,自然也不会落下这波趋势,在传闻满是AI能力的iOS 27上,先给无障碍功能刷上了一层AI底色。



虽然苹果的AI能力之前一直不算稳定,但由深耕无障碍交互多年的苹果来推动AI和无障碍的结合,本身就可能给整个行业做出新的示范。当然如果功能没法做到足够可靠,反而会给障碍用户带来麻烦,背离无障碍的初衷,实际体验如何还要等正式上线才能见分晓。



另外目前国行苹果的AI功能还没全面落地,这些新的无障碍体验暂时可能没法惠及国内用户,截至目前苹果中国大陆官网也还没有发布这些新功能的相关新闻稿。



但无论如何,让技术进步服务到真正有需要的人,帮更多人通过科技获得更体面、更自由的生活,这件事本身就足够值得期待。


本文仅代表作者观点,版权归原创者所有,如需转载请在文中注明来源及作者名字。

免责声明:本文系转载编辑文章,仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布,请及时与我们联系进行审核处理或删除,您可以发送材料至邮箱:service@tojoy.com