À la recherche de la prochaine grande plateforme matérielle, Meta et bientôt Apple expérimentent des lunettes de réalité virtuelle (VR) et de réalité augmentée (AR). L’intelligence artificielle est à la base de cette nouvelle classe d’appareils.
Les lunettes de RV et de RA bénéficient d’avancées significatives dans le domaine de la vision par ordinateur, c’est-à-dire la manière dont un ordinateur perçoit l’environnement qui l’entoure. Par exemple, le casque Quest de Meta peut scanner l’environnement en temps réel et signaler les obstacles, afin que vous ne vous heurtiez pas à eux dans la réalité virtuelle.
Vous pouvez tracer des frontières virtuelles dans l’espace avec une précision centimétrique. Les mouvements de la main sont saisis en temps réel avec une charge de calcul minimale – une tâche qui nécessitait autrefois un matériel spécialisé coûteux et gourmand en énergie est aujourd’hui réalisée sur un appareil mobile.
« L’IA accélère tout ce qu’elle touche
L’intelligence artificielle est la force motrice de cette fusion croissante entre la réalité analogique et la réalité numérique, également connue sous le nom de réalité mixte, qu’Apple et Meta poursuivent avec leurs derniers appareils matériels.
« L’apprentissage automatique est une technologie fondamentale dans les produits de réalité virtuelle depuis de nombreuses années, et ce sont les innovations en matière de vision par ordinateur qui ont rendu possibles des appareils comme le Meta Quest dès le départ », écrit Andrew Bosworth, directeur technique de Meta, dans l’annonce du Meta Quest 3.
Pour son dernier casque de réalité virtuelle, Meta a optimisé le suivi visuel des contrôleurs afin d’éliminer le besoin de grands anneaux de suivi visibles. Au lieu de cela, les manettes compactes sont détectées même lorsqu’elles disparaissent presque dans la main de l’utilisateur.
« C’est dans ce type de situation que l’IA permet d’effectuer des traitements informatiques lourds qui seraient impossibles sur un appareil mobile sans capteurs avancés ou capacités matérielles supplémentaires », écrit M. Bosworth.
Selon Meta, l’impact le plus important sera l’utilisation de l’IA générative dans le métavers, permettant à de nombreuses personnes de créer du contenu pour le monde numérique. Les petites équipes auraient soudain la puissance des grands studios, ce qui accélérerait considérablement l’innovation.
Yann LeCun, responsable de l’IA chez Meta, décrit également un assistant IA comme un compagnon quotidien : ayant accès aux connaissances du monde entier, il serait « votre meilleure défense contre la désinformation ».
On sait que Meta travaille sur des ensembles de données vidéo pour l’entraînement à l’IA qui montrent la vie quotidienne des gens d’un point de vue à la première personne. Ces données pourraient être utilisées pour former des assistants d’IA qui participent à la vie quotidienne des gens via des casques AR, contrairement à ChatGPT, qui est enfermé dans un ordinateur.
Le grand moment d’Apple en matière d’IA ?
Il est très probable qu’Apple dévoile lundi prochain son prochain grand appareil : un casque qui ressemble davantage à un casque de réalité virtuelle, mais qui utilise des caméras vidéo pour diffuser le monde extérieur sur son écran intégré, où il est fusionné avec la réalité mixte.
L’industrie de la RV et de l’AR espère de grandes nouvelles, mais l’annonce est également intéressante pour la scène de l’IA, car Apple a été plutôt réservée en ce qui concerne l’IA, malgré les énormes investissements réalisés ces dernières années.
Cependant, pour son casque de réalité mixte, Apple devra s’appuyer sur l’IA pour être compétitif, par exemple en matière de vision par ordinateur, de balayage spatial et de suivi des mains. Des modèles multimodaux avancés peuvent être utilisés pour la reconnaissance d’objets. Apple a déjà démontré qu’elle maîtrisait cette technologie avec ses services de réalité augmentée pour l’iPhone et l’iPad.
Il ne serait pas très surprenant qu’Apple parvienne à construire un meilleur matériel que Meta, grâce à des décennies d’expérience. Toutefois, le levier le plus important pourrait finalement être la qualité de l’expérience utilisateur et les fonctionnalités offertes par une implémentation de l’IA de haute qualité. C’est à ce stade que la véritable compétition peut avoir lieu. À partir de lundi, nous pourrons voir les progrès réalisés par Apple en matière d’IA dans une comparaison directe avec un concurrent.
