Apple功能大升级：AI可描述画面、生成字幕...

Apple今（19）日宣布多项全新辅助使用功能更新，并首度将Apple旗下AI系统Apple Intelligence导入“旁白”、“放大镜”、“语音控制”与“辅助使用阅读器”等功能。新功能可透过AI提供更详细的画面描述、自然语言操作、文章摘要与即时字幕生成，协助失明、低视能、失聪与肢体障碍使用者更自然操作iPhone、iPad、Mac与Apple Vision Pro等装置，预计今年稍晚上线。

其中一大亮点，是Apple将替整个Apple生态系加入“装置端字幕生成”功能。未来即使影片本身没有提供字幕或隐藏式字幕，系统也能透过装置端语音辨识，自动生成逐字稿字幕，支援iPhone、iPad、Mac、Apple TV与Apple Vision Pro，涵盖自行拍摄影片、亲友分享内容以及部分串流影片。Apple强调，所有字幕皆在装置端完成生成，以降低隐私外泄风险。

在视觉辅助功能方面，“旁白”新增Image Explorer功能，可利用Apple Intelligence更详细描述照片、帐单、文件与各类画面内容。使用者甚至能透过iPhone动作按钮，即时询问相机画面中的资讯，例如物品位置、文字内容或周遭环境，并以自然语言进一步追问细节。

专为低视能使用者打造的“放大镜”也同步升级。新版除了维持高对比介面外，也能直接询问画面内容，甚至可透过语音控制操作功能，例如直接说出“放大”或“开启手电筒”。

Apple也强化“语音控制”的自然语言能力。过去使用者必须记住按钮名称或操作编号，现在则能直接描述萤幕内容，例如说出“点一下最佳餐厅指南”或“打开紫色资料夹”，系统便能理解操作意图。Apple表示，这将有助于降低肢体障碍使用者的操作门槛。

另一项更新则是“辅助使用阅读器”的进化。Apple指出，新版可处理更复杂的内容版面，包括多栏文字、图片与表格的科学文章，同时加入AI摘要功能，让使用者能先快速掌握文章重点，再决定是否深入阅读。此外，也新增即时翻译功能，可保留原始字型、颜色与版面格式。

除了AI功能外，Apple也宣布Apple Vision Pro新增“眼球操控电动轮椅”功能。透过Vision Pro的眼球追踪系统，部分无法使用传统摇杆的使用者，可直接以视线控制相容轮椅驱动系统。首波将支援Tolt与LUCI系统，并率先于美国推出。

Apple宣布将AI导入多项辅助使用功能，未来iPhone可透过自然语言描述画面内容、即时生成影片字幕，Apple Vision Pro甚至能以眼球追踪控制电动轮椅。Apple官网

Apple同时宣布，由设计师Bailey Hikawa打造、专为障碍使用者设计的MagSafe配件“Hikawa Grip & Stand for iPhone”，正式于全球Apple Store线上商店开卖，新增三款配色。这款配件主打更容易握持iPhone，并与多位握力与行动能力受限人士共同开发。

其他更新还包括visionOS新增减少晕车不适的“车辆动态提示”、tvOS支援放大文字、失聪使用者的“姓名辨识”通知功能、FaceTime真人手语翻译API，以及支援Sony Access Controller连接iPhone、iPad与Mac等装置。

Apple表示，这些新功能将于今年稍晚陆续推出，其中部分功能初期仅支援英文版本。不过Apple Intelligence目前已支援繁体中文等多种语言。