Intelligence artificielle · Actualité

Que hace Apple con todo lo que escucha del micrófono del Apple Watch Series 12 y Ultra 4

Apple Intelligence arrive sur l'Apple Watch Series 12 et l'Apple Watch Ultra 4 avec une nouvelle capacité qui utilise le microphone de la montre pour détecter des sons, identifier de la musique et aider l'utilisateur à se souvenir de conversations. Selon les explications d'Apple, cette fonction, appelée Intelligence audio, combine les microphones de l'appareil, la puissance de la puce S11 et des modèles d'intelligence artificielle à l'intérieur et à l'extérieur de la montre.

La question qui se pose immédiatement est de savoir ce qu'Apple fait exactement de tout ce que le microphone de la montre entend. La réponse, selon la documentation de l'entreprise, est que l'audio est traité en temps réel dans un compartiment isolé par le matériel appelé Secure Exclave, il est converti en données utiles telles que des notifications, des résumés ou des extraits de texte, puis est immédiatement supprimé.

Il n'existe aucune enregistrement qui puisse être partagé, transféré ou remis sur demande externe, “car aucun enregistrement n'existe”, souligne l'entreprise.

Comment Apple Intelligence traite l'audio de l'Apple Watch

Le cœur technique de cette fonction repose sur la puce S11 et Secure Exclave, un espace isolé du reste du système où les données du capteur audio sont traitées. Apple soutient que “ni le système d'exploitation, ni les applications, ni toi, ni même Apple” ne peuvent accéder à ce que ce compartiment analyse. Une fois que les informations sont traitées, elles sont automatiquement supprimées.

Cet énoncé ne fonctionne pas de la même manière pour toutes les fonctions. Le Reconnaissance des sons et le Retour en direct sont entièrement traités sur le dispositif, entre l'Apple Watch et l'iPhone, sans sortir de ce circuit, sauf si l'utilisateur choisit de demander quelque chose à Siri sur le contenu détecté.

Le cas de Shazam est différent : lorsque la Pile intelligente détecte une chanson, Secure Exclave génère ce qu'Apple appelle une signature acoustique, une représentation compacte du son qui “ne peut pas être inverse au son original”. C'est cette signature, et non l'audio lui-même, qui est envoyée aux serveurs de Shazam pour identifier le titre et l'artiste.

Le Résumé de Siri implique un cheminement plus long. L'audio est crypté sur l'Apple Watch, voyage vers Secure Exclave de l'iPhone, où il est décrypté, transcrit et condensé. Ce texte condensé, qui selon Apple “réduit de moins de la moitié la taille de la transcription originale”, est ensuite envoyé à l'informatique privée dans le cloud (PCC) pour générer le résumé final, qui revient crypté à l'iPhone et à la montre.

Quelles fonctionnalités inclut l'Intelligence audio

Sous ce parapluie technique, Apple regroupe quatre nouvelles fonctionnalités. La Reconnaissance des sons détecte des bruits pertinents tels que des sirènes, des alarmes ou des sonnettes et envoie une notification à l'utilisateur, même sans l'iPhone à proximité, ce que l'entreprise note comme “particulièrement utile pour les personnes sourdes ou malentendantes”.

Le Chercheur Musical de Shazam identifie automatiquement la chanson qui joue dans l'environnement et affiche le titre et l'artiste directement sur la Pile intelligente, sans nécessiter de toucher à un widget.

Le Retour en direct permet de récupérer les 15 dernières secondes d'une conversation en appuyant deux fois sur la Digital Crown, affichant un extrait de texte à l'écran pour capter quelque chose que l'utilisateur n'a pas bien entendu.

Le Résumé de Siri, pour sa part, prend des notes d'arrière-plan pendant la journée et génère des résumés généraux via Apple Intelligence, destinés à rafraîchir la mémoire plus tard. Ces résumés sont automatiquement supprimés après sept jours si l'utilisateur ne décide pas de les conserver.

Quel contrôle l'utilisateur a-t-il sur ces fonctionnalités

Chacune de ces outils est optionnelle et nécessite une activation explicite. La Reconnaissance des sons s'active depuis l'application Paramètres de l'iPhone, dans la section Accessibilité, et si elle était déjà active sur le téléphone, elle se réplique automatiquement sur la montre. La détection de musique de Shazam s'active depuis la Pile intelligente sur l'Apple Watch.

Le Retour en direct ne se déclenche que lorsque l'utilisateur appuie intentionnellement deux fois sur la Digital Crown, et Apple précise que la fonction “ne continue pas à transcrire en arrière-plan ni ne sauvegarde le texte”, sauf si l'on choisit de le consulter avec Siri ou de le sauvegarder dans l'application Siri.

Le Résumé de Siri, en revanche, permet une programmation horaire ou locative, du genre “uniquement au travail” ou “jamais la nuit”, en plus de pouvoir être activé ou désactivé à tout moment depuis le Centre de contrôle. Tous les résumés et extraits sauvegardés peuvent être visualisés, modifiés, supprimés ou exportés depuis l'application Siri, et leur suppression se répercute sur tous les dispositifs synchronisés.

Que se passe-t-il avec la confidentialité des personnes qui sont à proximité

Apple consacre une section spéciale à ceux qui entourent l'utilisateur de la montre pendant une conversation. Par conception, aucune de ces fonctionnalités n'identifie ni n'attribue des phrases à des interlocuteurs spécifiques : le Résumé de Siri peut mentionner des noms s'ils apparaissent dans la conversation, mais ne tague jamais les interventions comme “a dit Juan” ou “Interlocuteur A” face à “Interlocuteur B”.

Il en va de même pour le Retour en direct, qui peut transcrire littéralement ce qui a été dit sans l'attribuer à quelqu'un en particulier.

Lorsqu'il est activé, le Retour en direct émet un son audible depuis son haut-parleur (même en mode silencieux ou avec des écouteurs connectés) et affiche une animation en plein écran avec un indicateur de microphone, comme signal aux personnes présentes que la fonction est en cours.

Apple indique également que les résumés sont conçus pour éviter le contenu potentiellement nuisible, tels que le langage lié à l'automutilation ou aux discours de haine, ainsi que des informations sensibles : données financières, identifiants gouvernementaux ou identifiants d'authentification.