Meta a récemment dévoilé son nouvel appareil révolutionnaire, l’Orion Maxwell Zeff, qui est présenté comme un rival potentiel de l’iPhone d’Apple. Après des années de spéculation de la part de la Silicon Valley et de Wall Street concernant les milliards de dollars investis par Mark Zuckerberg dans Reality Labs, Meta a enfin dévoilé son prototype de lunettes intelligentes Orion. Cette annonce a suscité un intérêt considérable et a changé la perception de nombreux observateurs sur la viabilité de ce projet.

Les lunettes intelligentes Orion intègrent la réalité augmentée, le suivi des yeux et des mains, une intelligence artificielle générative et un bracelet détecteur de gestes. Meta semble avoir résolu le problème d’affichage de la réalité augmentée en utilisant de petits projecteurs LED et des lentilles en carbure de silicium coûteuses. Les utilisateurs pourront porter l’Orion comme des lunettes normales et afficher des fenêtres de programme intégrées à leur environnement. La navigation se fera grâce aux mains, aux yeux et à la voix.

Bien que les lunettes intelligentes Orion de Meta soient plus volumineuses que des lunettes de lecture normales, elles coûtent 10 000 $ et ne seront pas commercialisées de sitôt. On parle d’années à partir de maintenant. La technologie de l’Orion est encore immature et doit devenir plus abordable, performante et compacte pour être intégrée dans des lunettes intelligentes achetées en grande surface. Zuckerberg affirme que l’Orion est en développement depuis 10 ans, mais il n’existe aucun produit commercialisable pour le moment.

Plusieurs entreprises tentent de mettre un smartphone sur votre visage, notamment Meta. Snap a récemment lancé ses nouvelles lunettes intelligentes Spectacles, qui sont plus volumineuses que l’Orion et offrent un champ de vision plus étroit. Lors de sa conférence I/O de mai, Google a laissé entendre qu’il travaillait sur des lunettes intelligentes, peut-être dans le cadre d’une deuxième tentative après l’échec du Google Glass de la décennie précédente. Apple pourrait également développer des lunettes en réalité augmentée similaires à l’Orion. La nouvelle entreprise de Jony Ive, LoveFrom, travaille sur un dispositif d’intelligence artificielle en collaboration avec OpenAI, bien que l’on ne sache pas s’il s’agit de lunettes, d’une broche ou autre chose.

Une course est en cours parmi les plus grandes entreprises de la tech pour produire des lunettes intelligentes élégantes capables de faire tout ce qu’un smartphone fait, voire plus. Le prototype de Meta a montré deux choses : il y a quelque chose, mais nous n’y sommes pas encore.

Ces appareils se distinguent des casques VR Quest de Meta, depuis longtemps annoncés, et des Vision Pro d’Apple. Bien que le suivi des yeux et des mains soit comparable, ils ont une apparence très différente. Les casques VR sont volumineux, encombrants et provoquent des nausées chez les utilisateurs. Cependant, des millions d’Américains portent des lunettes de soleil et des lunettes tous les jours car ils sont confortables.

Zuckerberg a longtemps promu les lunettes, même si cela n’était pas populaire. Selon des rapports, le PDG de Meta n’apprécie pas que ses applications de réseaux sociaux à succès doivent être utilisées sur des téléphones Apple, ce qui pourrait expliquer le projet de Facebook Phone. Les concurrents de Meta explorent également la technologie des lunettes intelligentes.

Les premiers investissements de Meta semblent porter leurs fruits. La présentation d’Orion de Zuckerberg lors d’une conférence de presse est parvenue à captiver un groupe de journalistes sceptiques. Bien que TechCrunch n’ait pas pu tester Orion, les premières évaluations sont encourageantes.

Aujourd’hui, Meta propose les Ray-Ban Meta, des lunettes avec des caméras, des microphones, des haut-parleurs, des capteurs, un LLM embarqué, une connectivité téléphonique et cloud. À 299 $, les Ray-Ban Meta sont plus simples que l’Orion mais moins chères que des Ray-Bans normales. Elles ressemblent aux Spectacles 3 de Snap il y a quelques années, bien que les lunettes Ray-Ban Meta aient plus de succès.

Orion et Ray-Ban Meta sont similaires malgré leurs différences de prix et de fonctionnalités considérables.

“Orion est l’avenir, et nous voulons offrir une expérience holographique complète”, a déclaré la vice-présidente des produits Li-Chen Miller, qui supervise l’équipe des lunettes intelligentes de Meta, à TechCrunch. “Nous devons vraiment maîtriser les bases, comme le rendre confortable, désirable et précieux au quotidien.”

Meta travaille sur l’intelligence artificielle des Ray-Ban Meta. Les lunettes intelligentes utilisent les modèles Llama de Meta pour répondre aux questions sur ce qu’elles voient en capturant des photos et en les envoyant au système d’intelligence artificielle avec des demandes vocales. Les fonctionnalités actuelles de l’IA des Ray-Ban Meta sont limitées : l’IA de Meta a une latence beaucoup plus élevée que le mode vocal avancé et naturel d’OpenAI, nécessite des instructions spécifiques, hallucine et n’est pas compatible avec de nombreuses applications, la rendant moins utilisable que mon iPhone (possible intention d’Apple). Les mises à jour de Meta plus tard dans l’année devraient résoudre ces problèmes.

Les lunettes intelligentes enverront des vidéos en direct et des questions vocales dans l’un des modèles d’IA multimodaux de Llama et fourniront des réponses verbales en temps réel, selon Meta. Des rappels et des connexions d’applications sont également à venir. Si cela fonctionne, cela devrait simplifier le processus. Ces avancées seront également intégrées à Orion, qui utilise les mêmes technologies d’intelligence artificielle générative, selon Miller.

“Il y a des choses qui ont plus de sens pour un facteur de forme que pour un autre, mais nous faisons certainement du cross-pollinisation”, a déclaré Miller.

Elle a déclaré que les fonctionnalités d’Orion pourraient être réduites alors que son équipe travaille à réduire le coût des lunettes en réalité augmentée. Les capteurs et les suiveurs oculaires de l’Orion sont coûteux. Le défi est qu’Orion doit s’améliorer et devenir moins cher.

Un autre obstacle est la dactylographie. Les lunettes intelligentes n’ont pas de clavier, mais les smartphones en ont un. Miller a passé près de 20 ans chez Microsoft à développer des claviers avant de rejoindre Meta. Elle qualifie l’interface sans clavier d’Orion de “libératrice”. Elle affirme que les lunettes intelligentes seront plus naturelles que les téléphones. La plupart des gens pourront interagir avec Orion en parlant, en faisant des gestes et en regardant.

Ironiquement, l’iPhone a été critiqué pour l’absence de clavier. En 2007, l’ancien PDG de Microsoft, Steve Ballmer, a moqué l’iPhone pour son absence de clavier, suggérant qu’il ne séduirait pas les utilisateurs professionnels. Bien entendu, les gens se sont adaptés, et ses déclarations semblent aujourd’hui ridicules après 15 ans.

Actuellement, rendre l’Orion plus naturel est davantage un objectif qu’une réalité. Dans son évaluation pratique, The Verge a constaté que les fenêtres occupaient parfois entièrement les lentilles des lunettes, bloquant la vision de l’utilisateur. Cela n’est pas naturel. Meta doit améliorer son IA, sa dactylographie, sa RA, et de nombreux autres aspects pour y parvenir.

“Nous avons gardé les Ray-Ban Meta très ciblées sur quelques choses, et elles le font très bien”, a déclaré Miller. “Cependant, pour construire une nouvelle plateforme informatique futuriste [avec Orion], nous devons bien faire beaucoup de choses.”