Apple начала тестировать заметки по разговорам на Apple Watch Series 12

В первых бета-версиях iOS 27.3 и watchOS 27.3 для разработчиков появились четыре функции Audio Intelligence для владельцев Apple Watch Series 12. Две из них распознают важные звуки, например сигнал тревоги или дверной звонок, и определяют музыку с помощью технологии Shazam. Две другие работают с речью. Live Rewind позволяет посмотреть, что было сказано за последние 15 секунд, а Siri Recaps составляет заметки по разговорам в течение дня. Функции пока находятся на стадии тестирования, поэтому описанный опыт относится к бета-версиям.

Siri Recaps рассчитана на ситуации, когда информацию произносят быстрее, чем её удобно записывать вручную. При проверке функции часы сохранили детали разговоров в автосервисе и пункте выдачи арендованной машины: размер франшизы, предполагаемый срок ремонта и количество топлива в машине при получении. Позднее к этим сведениям можно было вернуться в виде заметки. В отличие от Live Rewind, которая помогает восстановить только что пропущенную фразу, Recaps отбирает сказанное для последующего просмотра.

Тот же опыт выявил сложности автоматического отбора. В одной заметке сведения о ремонте оказались рядом с домашними планами и семейным расписанием, хотя разговоры относились к разным делам. При настройке на постоянную работу функция сохранила и случайное обсуждение просмотра телепередачи. Пользователю такой фрагмент может быть не нужен, однако модели приходится решать, что стоит записать, пока она обрабатывает повседневную речь. Ошибка здесь выражается не обязательно в неверных словах: заметка может точно передавать разговор, который человек не собирался сохранять.

Apple предусмотрела несколько ограничений для обработки таких разговоров. Когда возможно, звук обрабатывается и модели работают непосредственно на устройстве; функция не определяет личности говорящих и не сохраняет исходные аудиофайлы. Из заметок также удаляются отдельные виды конфиденциальных сведений, включая номера удостоверений и данные личных счетов. Эти меры уменьшают объём сохраняемой информации, но не меняют самого сценария использования: часы должны воспринимать речь поблизости, чтобы затем предложить её краткое содержание.