Apple добавляет ИИ‑функции доступности: улучшенные описания, автоматические субтитры и управление коляской взглядом

Apple объявила о широком обновлении функций доступности с использованием Apple Intelligence, которое расширяет возможности VoiceOver, Magnifier, Voice Control и Accessibility Reader, добавляет автоматические субтитры для любых видеороликов и даёт возможность управлять электроинвалидной коляской взглядом через Vision Pro. Компания подчёркивает, что новые возможности реализованы с учётом принципов приватности и нацелены на улучшение доступа к цифровому и личному контенту для людей с разными нарушениями. VoiceOver получил новую функцию Image Explorer на базе ИИ, которая даёт более подробные системные описания изображений — от фотографий до отсканированных счетов и личных документов. Обновлённый Live Recognition позволяет нажатием Action button на iPhone быстро спросить о содержимом в видоискателе и получить детальный ответ с возможностью задавать уточняющие вопросы.

Magnifier теперь интегрирован с Action button и принимает голосовые команды для управления увеличением и подсветкой, например «увеличь» или «включи фонарик». Это делает быстрый доступ к инструментам увеличения и освещения проще для пользователей, которые пользуются физическими кнопками и голосом. Voice Control избавляется от необходимости запоминать точные фразы: новая «гибкая вводная» позволяет описывать элементы интерфейса естественным языком. Опция «скажи то, что видишь» даёт возможность нажимать кнопки и переходить по приложениям, включая Apple Maps и Files, фразами вроде «тап по руководству о лучших ресторанах» или «тап по фиолетовой папке», что помогает при недостаточной маркировке элементов интерфейса.

Accessibility Reader получил улучшения для работы с более сложными источниками — научными статьями, текстами в несколько колонок, изображениями и таблицами. Появились on‑demand сводки для быстрого обзора и встроенный перевод, который позволяет читать текст на родном языке, сохраняя пользовательские настройки форматирования, шрифтов и цветов. Для пользователей с нарушением слуха Apple вводит автоматическую генерацию субтитров для любых видеороликов, включая клипы, полученные от друзей и семьи, а также стримы. Субтитры генерируются на устройстве, чтобы защитить приватность, и призваны закрыть пробелы там, где встроенных субтитров нет, расширяя доступ к личному и онлайн‑контенту.

Vision Pro получает функцию управления электроинвалидной коляской взглядом, которая позволяет использовать трекинг взгляда для продвижения управления мобильностью. Apple подчёркивает, что это решение интегрируется в экосистему устройств и ориентировано на безопасность и конфиденциальность пользователей.