Les futurs systèmes d'exploitation Apple bénéficieront du Project Greymatter, une série de fonctionnalités d'IA qui enrichiront les appareils de Cupertino. Des sources présumées proches de l'entreprise ont révélé que l'entreprise testait de nouvelles fonctionnalités d'IA avant la WWDC annuelle. Ce projet, connu en interne sous le nom de Greymatter, aura pour objectif d'accompagner les utilisateurs avec l'IA au quotidien.

Un Siri renouvelé
Une fonctionnalité s'appellera Greymatter Catch Up et sera liée à Siri. En pratique, vous pouvez demander à l'assistant vocal de recevoir un aperçu des notifications récentes. De plus, Siri, grâce à l'IA, pourra démarrer une conversation plus naturelle avec les utilisateurs. Néanmoins, Siri pourra peut-être répondre aux questions sur votre appareil, créer des résumés de longs articles ou transcrire de l'audio comme dans les applications Notes ou Mémos vocaux mises à jour. Tout cela se ferait grâce à l'utilisation d'Ajax LLM ou d'un traitement basé sur le cloud pour des tâches plus complexes. Enfin, vous pourriez par exemple utiliser l'assistant vocal d'Apple sur l'Apple Watch pour écouter de la musique sur un autre appareil (cette fonctionnalité n'est cependant pas attendue avant fin 2024).

IA pour la retouche photo
L'application Photos, sur iPhone et Mac, accueillerait favorablement les options d'édition basées sur l'IA. Apple a en effet développé la fonction Clean Up, qui permettra aux utilisateurs de supprimer des objets des images grâce à l'intelligence artificielle générative. De plus, la société a créé une application à usage interne connue sous le nom de Generative Playgroung. Ce logiciel serait capable de créer et d'éditer des images, tout en intégrant également iMessage. Ainsi, vous pouvez générer une image via l'IA, puis l'envoyer avec l'application de messagerie. Toujours avec l’IA, il sera possible de générer des emojis.

Plus de fonctionnalités pour l'application Notes
L'application Notes bénéficiera de la prise en charge de l'enregistrement audio intégré à l'application, de la transcription audio et de la possibilité de résumer les notes. Ces innovations transformeraient Note en une application plutôt fonctionnelle, la rendant idéale pour les étudiants et les professionnels.

L’arrivée de Math Notes
L'application Notes recevra l'implémentation de Math Notes, qui est une option qui permettra la reconnaissance d'équations mathématiques et fournira par conséquent des solutions dédiées. Entre autres choses, la prise en charge des expressions graphiques (quelque chose de similaire à l'application Grapher) est également testée. La fonction Keyboard Math Predictions est également en phase de test, ce qui permettrait de compléter des expressions mathématiques chaque fois qu'elles sont reconnues comme une saisie de texte partielle.

Actualités pour VisionOS et au-delà
VisionOS d'Apple bénéficiera d'une meilleure intégration avec Transformer LM d'Apple, le modèle de texte prédictif qui propose des suggestions au fur et à mesure que vous tapez. On suppose alors que le système d’exploitation recevra une interface utilisateur de commande vocale repensée. Enfin, Apple tenterait d'améliorer la saisie des utilisateurs grâce à l'utilisation de « réponses intelligentes », qui seront disponibles dans Messages, Mail et Siri. Les utilisateurs pourront ensuite répondre aux e-mails et aux messages avec des réponses textuelles générées par Ajax LLM.