X
Ultralytics YOLOv8.2 发布Ultralytics YOLOv8.2 发布Ultralytics YOLOv8.2 释放箭头
绿色检查
链接复制到剪贴板

走进 iOS 18:苹果辅助功能一览

苹果公司发布了全新的人工智能辅助功能,如眼球跟踪、音乐触觉和语音快捷键,可提供无缝的用户体验。

2024 年 5 月 15 日,苹果公司宣布即将推出 iOS 18 的一系列更新,重点关注无障碍环境。新的苹果更新计划于今年晚些时候发布,其中包括眼球追踪、触觉音乐和语音快捷键等创新功能。 

这些苹果无障碍功能让行动不便的人、耳聋或视力受损的人以及有语言障碍的人更容易使用苹果设备。苹果硅、人工智能(AI)和机器学习是这些功能背后的技术进步。让我们一起来探索苹果的新功能及其对日常生活的影响。

包容的重要性

作为一个社会,我们需要确保我们的技术进步对每个人都具有包容性。无障碍技术可以改变许多人的生活。例如,技术是当今任何工作的重要组成部分,但无障碍界面会给残疾人的职业生涯带来障碍。研究表明,2018 年残疾人的失业率几乎是非残疾人的两倍

法律系统也在解决技术无障碍化的问题。许多国家都制定了法律,规定了网站和数字产品的可访问性标准。在美国,与网站无障碍性相关的诉讼一直在稳步增长,从 2017 年到 2022 年,大约有 14000 起网络无障碍性诉讼,其中仅2022 年就有 3000 多起。无论法律要求如何,可访问性对于一个人人都能充分参与的包容性社会来说都是至关重要的。这正是以下 Apple 可访问性功能的作用所在。

过去的苹果无障碍功能

自 2009 年以来,苹果公司一直致力于为所有人提供无障碍技术。那一年,他们推出了 VoiceOver,这项功能允许盲人和视障用户使用手势和声音反馈来浏览 iPhone。读出屏幕上的内容,让用户更容易与设备互动。

图 1.你可以根据需要定制 Apple VoiceOver 功能,为你提供支持。

此后,苹果公司不断改进和扩展其无障碍功能。他们推出了用于屏幕放大的 "缩放 "功能、用于改善视觉对比度的 "反色 "功能,以及用于听力障碍人士的 "单声道音频 "功能。这些功能极大地改善了各种残疾用户与设备的交互方式。

下面我们就来仔细看看我们过去看到的一些关键的苹果辅助功能:

  • 反转颜色:通过反转颜色来改善视觉对比度,使有某些视觉障碍的用户更容易看到文字和图像。
  • 单声道音频:将立体声合并为一个声道,帮助单耳听力受损的用户更清晰地听到音频。 
  • 辅助触控:协助肢体残疾用户使用可定制的屏幕菜单执行复杂的触摸手势。 
  • 开关控制:允许有运动障碍的用户使用外部开关(如头戴式开关或啜吸开关)控制设备。

苹果眼球跟踪技术如何提高可用性

现在,手部行动不便的人只需看着屏幕,就能轻松浏览互联网、发送信息,甚至控制智能家居设备。这些先进技术使他们的日常生活变得更易于管理,让他们能够独立完成以前觉得困难的任务。

即将推出的另一项令人兴奋的苹果辅助功能是眼动追踪,它使这成为现实。眼动追踪功能专为肢体残疾用户设计,可在 iPad 和 iPhone 上提供免提导航选项。通过使用人工智能和前置摄像头来观察你的视线,它可以让你毫不费力地激活按钮、轻扫和其他手势。

图 2.使用眼动追踪技术,在不接触 iPad 的情况下使用它。

前置摄像头可在数秒内设置和校准眼动追踪功能。您可以使用 Dwell Control 与应用程序元素进行交互,只需用眼睛就能访问按钮和轻扫等功能。用户可以相信自己的隐私会得到保护,因为设备会使用设备上的机器学习功能安全地处理所有数据。眼动追踪技术可在 iPadOS 和 iOS 应用程序中无缝运行,无需额外的硬件或配件。Apple Vision Pro 的 VisionOS 还包含眼球跟踪功能,可轻松导航。

用 Apple Music 触觉技术感受节拍

音乐触觉技术是苹果即将发布的另一项辅助功能。它专为耳聋或重听用户设计,让他们在 iPhone 上体验音乐。使用时,触觉引擎会产生与音频同步的敲击声、纹理和精致的振动。你可以感受到音乐的节奏和细微差别。由于 Taptic Engine 能够产生不同强度、模式和持续时间的振动,从而捕捉到音乐的感觉,因此它的效果相当深入。

图 3.音乐触觉技术让音乐更容易被人接受。

音乐触觉技术能以一种前所未有的方式将重听者与音乐联系起来。这为他们的日常生活开启了一个体验世界。边听音乐边跑步,或与朋友一起欣赏歌曲,都将成为一种身临其境的共享体验。振动可以与锻炼播放列表中的能量相匹配,使锻炼更有动力,或者用最喜欢的冥想曲调帮助平静神经。Music Haptics 支持 Apple Music 目录中的数百万首歌曲,并将作为 API 提供给开发者,使他们能够创建更易于使用的应用程序。

利用 Apple Vocal Shortcuts 轻松控制

在新的无障碍功能列表中,苹果公司设计了 "发声快捷方式"(Vocal Shortcuts)来利用人工智能改进语音系统。它允许 iPhone 和 iPad 用户创建 "自定义语音",这样 Siri 就能启动快捷方式并管理复杂的任务。这对患有脑瘫、肌萎缩性脊髓侧索硬化症或中风等疾病的人尤其有帮助。

图 4.Vocal Shortcuts 使用人工智能进行高级识别。

非典型语音监听 "功能利用设备上的机器学习来识别和适应不同的语音模式,从而使发送信息或设置提醒事项等任务变得更加简单。通过支持自定义词汇表和复杂单词,语音快捷方式提供了个性化和高效的用户体验。

用苹果让乘车更方便

此外,苹果公司还推出了一些新的辅助功能,帮助乘客在旅行中更舒适地使用设备。例如,"车辆运动提示 "是 iPhone 和 iPad 的一项新功能,有助于减少乘客在行驶车辆中的晕车现象。晕动病的发生往往是由于人的视觉和感觉之间的感官不匹配造成的,使人在运动中使用设备时感到不舒服。车辆运动提示通过在屏幕边缘显示动画点来表示车辆运动的变化,从而解决了这一问题。它可以在不干扰主要内容的情况下减少感官冲突。该功能利用 iPhone 和 iPad 的内置传感器来检测用户是否处于移动的车辆中,并做出相应调整。

图 5.车辆运动提示让每个使用设备的人都能更轻松地长途乘车。

CarPlay 也进行了更新,以增强无障碍功能。语音控制功能允许用户使用语音指令操作CarPlay及其应用程序,而声音识别功能则可提醒耳聋或听力有障碍的用户注意汽车喇叭和警报声。对于色盲用户,色彩过滤器提高了CarPlay界面的视觉可用性。这些增强功能有助于让所有乘客在乘车过程中更加舒适。

VisionOS 的实时字幕

Apple Vision Pro 已经为苹果公司提供了字幕、隐藏式字幕和转录等辅助功能,帮助用户观看音频和视频。现在,苹果正在进一步扩展这些功能。新的人工智能驱动的实时字幕功能通过在屏幕上实时显示文字,让每个人都能跟上实时对话中的口语对话和应用程序中的音频。这对耳聋或重听人士尤其有益。例如,在 VisionOS 中进行 FaceTime 通话时,用户可以看到屏幕上转录的语音对话,从而更方便地使用他们的角色(计算机生成的虚拟化身)进行联系和协作。

人工智能让世界更无障碍 

与苹果公司的无障碍举措类似,许多其他公司也在积极研究和创新,利用人工智能创造无障碍解决方案。例如,人工智能自动驾驶汽车可以让行动不便的人更容易自己开车,从而实现独立。迄今为止,残疾人可以使用经过特别改装的车辆来驾驶汽车,这些车辆带有手控装置、转向辅助装置和轮椅辅助功能等适应性装置。随着计算机视觉等人工智能技术的集成,这些车辆现在可以提供更多支持。

图 6.计算机视觉是自动驾驶汽车的关键要素。

特斯拉的自动驾驶系统Autopilot)就是人工智能辅助驾驶的一个很好的例子。它利用先进的传感器和摄像头探测障碍物、解读交通信号并提供实时导航辅助。有了这些人工智能输入,车辆可以处理各种驾驶任务,如保持在车道内行驶,并根据交通状况调整车速。计算机视觉的洞察力让每个人都能获得更安全、更便捷的驾驶体验。

人工智能驱动的包容性新时代

有了这些新的 Apple 更新,我们将迎来一个人工智能驱动的包容性新时代。通过将人工智能整合到无障碍功能中,苹果正在让残障人士的日常工作变得更轻松,并促进技术的包容性和创新性。这些进步将影响各个市场:科技公司将树立新的包容性基准,医疗保健将受益于残疾人独立性的提高,消费电子产品对无障碍设备的需求也将增加。技术的未来很可能是为每个人创造无缝的用户体验。

查看我们的GitHub 存储库,加入我们的社区,随时了解最前沿的人工智能发展。了解人工智能如何重塑自动驾驶技术、制造业医疗保健等领域。

Facebook 徽标Twitter 徽标LinkedIn 徽标复制链接符号

在此类别中阅读更多内容

让我们共同打造人工智能的未来

开始您的未来机器学习之旅