Функция Live Captions от Apple будет автоматически транслировать любой звук на вашем iPhone, iPad и Mac, в том числе в телефонных и видео звонках, и в реальной жизни.
- Live Captions — это предстоящая новая функция для iPhone, iPad и Mac, которая использует искусственный интеллект для распознавания любого аудиоконтента в текст.
- Функция автоматически расшифрует аудиоконтент, во время разговоров по FaceTime, просмотра видео в приложении социальных сетей или при разговоре с реальным человеком рядом с вами.
- Не путайте Live Captions с Live Text, которая была представлена вместе с iOS 15, для упрощения копирования текста с изображений.
Устройства Apple сможет распознавать любой звук
Live Captions не заботится об источнике звука. При включенной функции, любой звук автоматически транскрибируется, независимо от того, разговариваете вы по телефону или разговариваете с человеком, стоящим рядом с вами. Расшифрованный текст отображается в приложении в виде субтитров, которые вы сможете настроить по размеру.
Apple упомянула следующие сценарии, в которых Live Captions могут пригодиться:
- Телефонные звонки
- Звонки FaceTime
- Приложения для видеоконференций
- Приложения социальных сетей
- Потоковый мультимедийный контент
- Разговор с человеком рядом с вами
Точность преобразования речи в текст с годами значительно улучшилась, хотя распознавание приглушенных диалогов все еще проблематично. Вот почему Apple предупреждает, что точность Live Captions может различаться. На эту функцию «не следует полагаться в ситуациях высокого риска», отмечает компания. Live Captions скорее всего будет запущена в бета-версии.
Live Captions в группах FaceTime
Функцию Live Captions можно будет использовать при групповых вызовах FaceTime. В этом случае все расшифрованные диалоги будут приписаны участникам звонка, чтобы люди с нарушениями слуха могли легко следить за ними. А при использовании на Mac участник вызова FaceTime может даже напечатать свой ответ и произнести его вслух в режиме реального времени другим участникам разговора.
Конфиденциальность и безопасность
Live Captions работает благодаря машинному обучению и другим передовым технологиям, таким как компьютерное зрение и искусственный интеллект. Как и другие функции Apple, Live Captions защищает вашу конфиденциальность. Это означает, что субтитры генерируются на устройстве. Ваши данные никогда не покидают устройство, не загружаются и не передаются. Apple анонсировала Live Captions, наряду с Apple Watch Mirroring и другими будущими вспомогательными функциями, в пресс-релизе на сайте.
Системные требования для Live Captions
Функция Live Captions работает на следующих устройствах и операционных системах:
- iPhone 11 и новее
- Модели iPad с процессором A12 Bionic и новее
- Компьютеры Mac Apple Silicon
К iPad с A12 Bionic относятся iPad Air 3, iPad mini 5 и iPad 8. Если у вас iPad из этого списка, то вы сможете воспользоваться Live Captions. Языковая поддержка Live Captions изначально будет ограничена английским (США, Канада).
Когда выйдет функция Live Captions
Apple впервые анонсировала функцию Live Captions во вторник, 1 мая. Компания не сообщила точной даты запуска, за исключением того, что она появится в конце этого года. «Эти функции будут доступны позже в этом году с обновлениями программного обеспечения для всех платформ Apple», — отмечает Apple. Ожидайте запуск Live Captions осенью вместе с iOS 16, iPadOS 16 и macOS 13.0.
Читайте: Как работает функция Онлайн-текст в iOS 15 [распознавание текста с iPhone]
Для кого эта функция
Live Captions — это вспомогательная функция, предназначенная для людей с проблемами слуха. Но, как и все функции специальных возможностей, Live Captions может использовать любой человек. Живые субтитры уже присутствуют в браузере Google Chrome и во многих социальных сетях.