Apple показала новые функции доступности с Apple Intelligence: умные описания изображений, субтитры «на лету» и управление коляской через Vision Pro
Apple анонсировала набор обновлений доступности, которые используют Apple Intelligence и расширяют возможности VoiceOver, Magnifier, Voice Control и Accessibility Reader. Идея — сделать управление устройствами более «разговорным» и контекстным для людей с нарушениями зрения, слуха и моторики, а также добавить новые сценарии на iPhone, iPad, Mac, Apple TV и Apple Vision Pro. Компания говорит, что функции выйдут позже в этом году вместе с новыми версиями ОС, которые обычно показывают на WWDC в июне и выпускают осенью.
Для VoiceOver появится Image Explorer: Apple Intelligence будет давать более подробные описания изображений по всей системе — от фотографий и сканов счетов до личных документов. Также описан сценарий с Action-кнопкой на iPhone: можно направить камеру на объект и задавать вопросы о том, что «видит» видоискатель, с поддержкой уточняющих вопросов на естественном языке. Похожую «визуальную» подсказку получает и Magnifier, где к высококонтрастному интерфейсу добавят описания, а управлять можно голосом, вроде «приблизь» или «включи фонарик».
Voice Control станет лучше понимать естественную речь: вместо запоминания точных названий элементов или их номеров можно будет говорить что-то вроде «нажми на гид про лучшие рестораны» или «нажми на фиолетовую папку». Apple подчёркивает, что это поможет даже там, где элементы на экране плохо размечены для доступности. Accessibility Reader научат корректнее работать со сложными документами с колонками, изображениями и таблицами, добавят сводки «по запросу» и встроенный перевод с сохранением пользовательских настроек шрифтов, цветов и форматирования.
Отдельно заявлены Generated Subtitles — автоматические субтитры на базе распознавания речи на устройстве для видео без титров, включая ролики, снятые на iPhone, полученные от друзей, или просмотренные онлайн, причём на iPhone, iPad, Mac, Apple TV и Vision Pro. На старте функция будет доступна на английском в США и Канаде. Ещё один заметный анонс — Power Wheelchair Control для Apple Vision Pro: точный eye-tracking предлагают как альтернативный способ управления для пользователей, которые не могут пользоваться джойстиком; в США заявлена поддержка систем Tolt и LUCI через Bluetooth или проводное подключение.
Помимо крупных новинок Apple перечислила и более мелкие улучшения, включая Vehicle Motion Cues в visionOS для снижения укачивания, новые «жесты лицом» в Vision Pro для системных действий, более надёжное сопряжение слуховых аппаратов Made for iPhone, расширение Name Recognition на более чем 50 языков и поддержку увеличенного текста в tvOS. Также FaceTime получит API, позволяющий приложениям для перевода жестового языка подключать живого переводчика к видеозвонку. Все эти функции Apple традиционно анонсирует перед Global Accessibility Awareness Day, а релизы обычно привязаны к осенним обновлениям iOS 27, iPadOS 27, macOS 27, tvOS 27 и visionOS 27.
