Exploration des progrès de la technologie AR et des lunettes Orion de Meta

Même si nous vivons dans un monde riche, tridimensionnel (3D), rempli de données et d'informations, la plupart des appareils que nous utilisons quotidiennement reposent sur un écran bidimensionnel (2D). Cependant, à mesure que la technologie progresse, cette situation change lentement avec l'introduction d'innovations telles que la réalité augmentée (RA). La RA est utilisée pour mélanger du contenu numérique, tel que des images, des sons et des données, à notre environnement réel, le rendant ainsi plus interactif et attrayant. 

L'intelligence artificielle (IA), en particulier la vision par ordinateur, est l'un des principaux moteurs de la réalité augmentée. L'IA de vision permet aux appareils de RA d'analyser et d'interpréter leur environnement en détectant les objets, en suivant les mouvements et en reconnaissant les caractéristiques spatiales. Dans cet article, nous allons explorer le fonctionnement de la réalité augmentée et ses applications dans des domaines tels que l'éducation, la santé et le divertissement. Nous parlerons également des avancées récentes, comme les nouvelles lunettes de réalité augmentée Orion de Meta, qui rendent la réalité augmentée plus accessible. C'est parti !

‍

L'évolution de la réalité augmentée

La réalité augmentée ajoute des éléments numériques, comme des images, des vidéos ou des modèles 3D, au monde réel par le biais d'appareils tels que les smartphones, les tablettes ou les lunettes AR. Par exemple, si tu pointes l'appareil photo de ton téléphone sur une table vide, la réalité augmentée peut donner l'impression qu'une tasse de café virtuelle est posée dessus. La RA peut améliorer la façon dont nous voyons notre environnement en mélangeant des éléments générés par ordinateur avec ce que nous voyons dans la vie réelle.

En 1968, Ivan Sutherland, connu comme le"père de l'infographie", a créé le premier écran monté sur la tête à Harvard. Au départ, la RA était utilisée dans des domaines tels que l 'aviation, l'armée et la formation industrielle. La première utilisation commerciale de la RA est apparue en 2008 avec une publicité interactive de BMW Mini. En tenant une publicité imprimée dans un magazine devant la caméra d'un ordinateur, les utilisateurs pouvaient voir un modèle numérique de la voiture sur leur écran et contrôler ses mouvements, ce qui leur donnait l'impression d'interagir avec la voiture dans la vie réelle. Cela a ouvert la voie à l'entrée de la RA dans des secteurs comme le marketing, le tourisme, la mode et le divertissement. Avec des applications de jeu populaires comme Pokémon Go en 2016, l'adoption de la RA a augmenté. Le marché mondial de la réalité augmentée devrait atteindre environ la somme vertigineuse de 2 804,82 milliards de dollars d'ici 2034. 

‍

Le rôle de la vision artificielle dans la RA

Diverses technologies, notamment la vision par ordinateur, les capteurs et l'apprentissage automatique, travaillent ensemble pour créer des expériences immersives de réalité augmentée. La vision par ordinateur, en particulier, constitue la base de la façon dont le contenu numérique est facilement intégré dans les environnements du monde réel par le biais de la RA. Voici un examen plus approfondi des différentes façons dont la vision par ordinateur contribue à la RA :

• Reconnaissance d'objets: En utilisant des techniques de vision artificielle comme la détection d'objets, la segmentation d'images et le suivi d'objets, les systèmes de RA peuvent reconnaître des objets en analysant leur taille, leur forme et leur couleur. Une fois identifiés, des contenus virtuels tels que des modèles 3D ou du texte peuvent être superposés.
• Localisation et cartographie : La vision par ordinateur peut être utilisée pour la localisation et la cartographie simultanées (SLAM) afin de suivre la position et l'orientation de l'appareil en temps réel, ce qui permet de s'assurer que les éléments virtuels restent précisément alignés sur la vue de l'utilisateur pour une expérience stable.
• Reconnaissance des gestes et des mouvements: L'IA de la vision peut être utilisée pour suivre les gestes, les expressions faciales et les mouvements de l'utilisateur, ce qui permet des interactions naturelles avec le contenu virtuel dans la RA. 
• Estimation de la profondeur : L'analyse d'images aide les dispositifs de RA à comprendre à quelle distance se trouvent les objets dans l'environnement en analysant ce qu'ils voient. Cela permet de placer les éléments virtuels à la bonne distance, de les faire se fondre naturellement dans le monde réel et d'améliorer l'expérience globale de la RA.
• Adaptation à l'environnement : La vision par ordinateur peut être utilisée pour ajuster les objets virtuels afin qu'ils réagissent aux conditions du monde réel comme l'éclairage, les reflets et les ombres dans la RA. 

Par exemple, disons que tu utilises une application de RA pour voir une sculpture numérique dans ton salon. Lorsque tu bouges ton téléphone ou ton casque AR, le système de vision par ordinateur commence à reconnaître les objets autour de la pièce, comme ton canapé ou ta table basse, à l'aide de la détection d'objets. 

Simultanément, la technologie SLAM cartographie la disposition de la pièce et suit la position de ton appareil pour s'assurer que la sculpture reste fixée au même endroit. Lorsque tu t'approches, l'estimation de la profondeur aide l'application à ajuster la taille de la sculpture, pour qu'elle apparaisse positionnée de façon réaliste. Si tu agites la main, la reconnaissance des gestes peut te permettre de faire pivoter ou de redimensionner la sculpture. L'application peut également adapter l'éclairage et les ombres de la sculpture aux conditions d'éclairage de la pièce, afin qu'elle s'intègre parfaitement à ton salon.

Orion : Les lunettes de réalité augmentée de Meta

La RA progresse rapidement et Meta a récemment annoncé ses lunettes de RA Orion le 25 septembre 2024, lors de l'événement Meta Connect 2024. Selon le PDG de Meta, Mark Zuckerberg, les lunettes Orion sont les lunettes AR les plus avancées jamais fabriquées, combinant de nombreuses fonctionnalités de pointe. Elles ressemblent à une paire de lunettes ordinaire mais sont dotées de capacités de RA immersives, offrant le plus grand champ de vision vu dans les lunettes de RA jusqu'à présent. 

Les lunettes sont légères, avec une monture en magnésium, semblable à celle utilisée dans les voitures de F1, et un système de refroidissement avancé inspiré des satellites de la NASA pour plus de confort. Elles utilisent un écran de nouvelle génération fabriqué à partir de carbure de silicium personnalisé, avec de minuscules projecteurs qui peuvent créer des hologrammes de différentes profondeurs et tailles juste devant toi.

Les lunettes Orion AR sont dotées d'options pour les commandes vocales, le suivi des mains, le suivi des yeux et une interface de bracelet qui capte les impulsions électriques de tes muscles pour contrôler les éléments AR avec des mouvements subtils. Le bracelet agit comme une interface neuronale, te permettant d'interagir avec les lunettes à l'aide de gestes simples, ce qui en fait un élément clé de l'expérience globale. Les lunettes sont également équipées d'une petite rondelle de traitement de poche qui fournit la puissance informatique dont tu as besoin en déplacement. 

‍

Ce qui distingue Orion, c'est son intégration avec Meta AI, un assistant intelligent qui peut reconnaître les objets du monde réel et fournir des informations utiles. Par exemple, si tu regardes un ensemble d'ingrédients, Meta AI peut te suggérer des recettes. Tu peux également transformer n'importe quel mur en écran pour regarder des vidéos, participer à des appels vidéo holographiques ou jouer à des jeux interactifs, ce qui fait d'Orion une étape passionnante dans les expériences de RA.

Les applications de la technologie AR portable

La technologie de réalité augmentée portable, comme les lunettes ou les casques Orion AR, te permet de faire l'expérience de la réalité augmentée sans avoir besoin de tenir un appareil, contrairement à l'utilisation d'un téléphone ou d'une tablette. Passons en revue différentes applications où la réalité augmentée portable fait la différence.

La RA rend l'éducation plus accessible

De nombreux élèves sont des apprenants pratiques ou visuels, et la réalité augmentée peut aider les enseignants à créer des leçons plus interactives. Grâce à la technologie de réalité augmentée portable, comme les casques ou les lunettes intelligentes, les enseignants et les élèves peuvent s'engager avec le contenu éducatif d'une manière plus dynamique qui leur permet d'apprendre n'importe quand et n'importe où. 

Ces dispositifs portables sont particulièrement utiles dans les régions isolées, car de nombreuses applications de RA peuvent fonctionner hors ligne ou avec une connectivité minimale une fois que les données nécessaires sont téléchargées. Les pays en développement utilisent la RA portable pour offrir une éducation de qualité aux élèves dans le besoin. Dans des pays comme le Rwanda, le Nigéria et l'Afrique du Sud, la RA portable aide à éduquer les élèves dans les zones reculées, touchant plus de 500 000 élèves rien qu'au Rwanda.

‍

Lunettes AR pour les jeux

L'application la plus populaire de la RA est le jeu. L'industrie du jeu commence à reconnaître comment les lunettes de RA peuvent rendre les jeux plus immersifs et interactifs. Les joueurs peuvent voir des éléments virtuels dans le monde réel grâce à la RA, ce qui leur donne l'impression de faire véritablement partie du jeu. Par exemple, les joueurs peuvent explorer et interagir avec leur environnement les mains libres, ce qui rend l'expérience plus naturelle. 

Si les jeux de RA sont d'abord devenus populaires sur les appareils mobiles, comme avec Pokémon Go, où les joueurs utilisaient les caméras de leur téléphone pour attraper des Pokémon, le passage aux lunettes de RA devrait rendre les jeux encore plus attrayants. Pokémon Go marque une étape importante car il a montré le potentiel de la RA en atteignant plus de 20 millions de joueurs actifs en seulement 7 jours.

‍

Comment la RA aide les médecins et les chirurgiens

Grâce à la réalité augmentée, les médecins et les professionnels de santé peuvent accéder à des images médicales en 3D et les étudier. En fait, les outils d'imagerie médicale compatibles avec la RA peuvent aider les médecins à visualiser l'anatomie du patient dans un environnement 3D. Une visualisation plus claire peut conduire à des diagnostics plus précis, à de meilleurs résultats chirurgicaux et à des procédures plus sûres. 

La RA peut également aider les professionnels de la santé à offrir des soins plus personnalisés et plus efficaces en identifiant l'emplacement et l'étendue des maladies, en planifiant les interventions chirurgicales et en permettant aux patients de mieux comprendre leur état. Par exemple, grâce aux casques de RA, les chirurgiens peuvent passer en revue les constantes d'un patient au cours d'une procédure médicale sans avoir à jongler avec plusieurs appareils et écrans d'affichage. Ce faisant, ils sont moins susceptibles de mal lire ou de mal interpréter les données.

‍

Principaux enseignements 

La réalité augmentée est appelée à changer la façon dont nous interagissons avec le monde numérique. En combinant des éléments virtuels avec le monde réel, la RA crée une expérience plus immersive que les écrans traditionnels. Les lunettes Orion AR de Meta, avec leurs fonctions avancées, leur design confortable et leurs capacités d'IA, constituent un grand pas en avant dans la technologie AR. À mesure que la RA se répand dans notre vie quotidienne, nous pouvons nous attendre à ce que la frontière entre le monde physique et le monde numérique s'estompe, ce qui ouvrira la voie à de nouvelles possibilités d'innovation et de créativité.

Tu veux en savoir plus sur l'IA ? Consulte notre dépôt GitHub pour voir nos contributions à l'IA et à la vision par ordinateur, et n'oublie pas de t'engager auprès de notre communauté. Découvre comment nous redéfinissons des secteurs comme la fabrication et l'agriculture grâce à des technologies d'IA de pointe.