Temps de boom pour XR à AWE 2023

Chaque année, je quitte l'Exposition Universelle Augmentée (AWE) épuisée d'avoir marché, parlé, debout, papoté et d'avoir souffert d'une surcharge sensorielle. La conférence et l'exposition, qui viennent de terminer leur 14e édition annuelle à Santa Clara, sont le spectacle de l'écosystème des coulisses qui fait fonctionner tout cela, mais même les techniciens chevronnés ont du mal à suivre les discussions incessantes sur le baseball et les démonstrations de middleware. . On estime que plus de 6 000 personnes ont assisté pour entendre 450 conférenciers sur trois jours, et l'exposition de deux jours avec 300 exposants, la plus importante de l'histoire de l'AWE. Le vice-président et directeur général de Qualcomm, Hugo Swart, a déclaré à propos d'AWE : "Les développeurs sont les vedettes du spectacle ici."

La 13e exposition et conférence sur l'univers augmenté a eu lieu du 1er au 3 juin 2022 à Santa Clara, en Californie

Le salon de cette année arrive à un moment historique : Apple s'apprête à sortir son casque Reality One XR lors de sa conférence annuelle des développeurs lundi, pour laquelle de nombreux participants AWE commenceront à développer du contenu dès cet été. Pressé de battre l'actualité d'Apple, Meta a présenté mercredi le Quest 3. Le nouvel appareil de réalité mixte est une amélioration notable par rapport au Quest 2 et sera peut-être encore meilleur que son prédécesseur, le Quest Pro à 1200 $, dont la société faisait la démonstration dans un stand, son premier à AWE. Le nouveau Quest plus léger et plus rapide, doté des derniers processeurs Qualcomm, sera disponible au quatrième trimestre pour 500 $. Le Reality One d'Apple devrait coûter jusqu'à 3 000 $. Dans le même temps, Google travaille avec Samsung et Qualcomm sur son propre casque.

Le discours d'ouverture du co-fondateur et PDG d'AWE, Ori Inbar, a été prononcé avec son avatar volmétrique, propulsé par ... [+] ChatGPT.

Le fondateur et PDG d'AWE, Ori Inbar, a ouvert le salon avec son discours de bienvenue annuel mercredi matin sur le thème "XR est partout". Comme toujours, son discours était un mélange d'évangélisation ringard, de perspicacité et de tour de passe-passe technologique. Dans ce cas, Inbar avait un jumeau numérique dans une capsule holographique à échelle humaine d'Ahrt. La taille réelle, Ori holographique, a été scénarisée par ChatGPT. Toutes les conférences d'AWE seront gratuites en ligne sur AWE.live d'ici la fin de la semaine prochaine.

Auteur Neal Stpehenson, co-fondateur de la startup web3 Lamina1.

L'ouverture d'Inbar a été suivie d'une conversation au coin du feu avec l'auteur et co-fondateur de la startup blockchain Lamina 1, qui construit une plate-forme pour permettre un monde virtuel 3D spatial persistant qui pourrait soutenir une économie virtuelle à l'échelle mondiale. Stephenson est surtout connu pour son roman Snow Crash, qui a d'abord appelé cette autre dimension numérique "le métaverse". Il a souligné qu'il n'y aura pas de métaverse sans un moyen pour les utilisateurs et les créateurs d'avoir un moyen sûr et sans friction d'échanger de la valeur.

Hugo Swart, vice-président et directeur général de XR chez Qualcomm.

Inbar et Stephenson ont été suivis par Hugo Swart, vice-président et directeur général de XR pour Qualcomm, dont le chipset XR2 alimente la plupart des casques XR, y compris le Quest. Il a approfondi la manière dont les développeurs exploitent la puissance et le but d'un écosystème multiplateforme via Snapdragon Spaces, un SDK (kit de développement logiciel) Qualcomm introduit en 2021 qui fonctionne avec les plates-formes de développement de jeux Unity et Unreal Engine. En utilisant Spaces, les développeurs peuvent déployer beaucoup plus facilement des applications sur plusieurs appareils, c'est ainsi que fonctionnent les téléphones Android. Chaque fois que Swart a mentionné Spaces, le public a applaudi.

Rony Abovitz s'est téléporté vers AWE depuis les bureaux du BCG en Floride en utilisant AHRT

En plus de l'introduction imminente du nouvel appareil d'Apple, l'IA était le sujet d'actualité, supplantant le passe Metaverse, qui est apparemment dans une décennie. "Les bulles ne se dégonflent pas", a déclaré Avi Bar-Zeev, vétéran d'Apple, de Google et d'AWS XR, dans son discours. "Ils ont éclaté." L'IA n'est peut-être pas comme ça. Il semble se fondre dans tout. "L'IA est ce que XR attendait", a déclaré le fondateur de Magic Leap, Rony Abovitz, qui s'est téléporté holographiquement depuis les bureaux du Boston Consulting Group à Fort Lauderdale via la capsule Ahrt lors de l'une des premières sessions. "Nous sommes encore dans la phase Gemini du développement XR", a-t-il déclaré.

Avi Bar-Zeev prononce son discours d'ouverture à AWE 2023.

Bar-Zeev a conclu sa présentation avec cinq principes pour la XR et l'IA qui méritent d'être répétés ici : (1) Fonctionne pour le bénéfice de chaque personne et avec son consentement éclairé (2) Les créateurs doivent pouvoir gagner leur vie dans un écosystème florissant (3) Ceux qui bénéficient le plus d'un écosystème prospère devraient en payer le prix (4) La sécurité n'est pas négociable et (5) Vous ne pouvez pas faire confiance à la technologie pour résoudre les comportements humains antisociaux.

Diapositive de la présentation du nouveau distributeur automatique de Coca utilisant la technologie Snap AR.

Snap, la société de caméras dont les objectifs AR mobiles sont utilisés par les consommateurs six milliards de fois par jour, a accru sa présence à AWE depuis la pandémie. L'année dernière, son co-fondateur et CTO Bobby Murphy a donné un discours d'ouverture. Cette année, les dirigeants de l'entreprise Resh Sidhu et Ben Feuerstein ont démontré leur travail basé sur la localisation avec Disney, Coke et Live Nation. L'activation de Snap à l'extérieur de la salle de bal Mission a démontré sa stratégie consistant à retirer la réalité augmentée de l'application et dans le monde avec des miroirs magiques apportant la magie de la réalité augmentée du téléphone et dans le monde physique. Ils ont également eu un affichage remarquable d'objectifs AR dans tout l'espace. Les nouvelles Snap Specs étaient à portée de main pour la démonstration. Vous ne les porteriez pas toute la journée, mais ils ajouteraient une dimension numérique à un événement comme Coachella ou la Coupe du monde. Les nouvelles spécifications comportent également une stéréographie vidéo qui a un effet 3D remarquable à l'intérieur des lunettes, qui n'ont pas de date de rue et n'ont pas l'attrait visuel des modèles précédents, bien que lors de cette conférence, ce soit un détail mineur. La plupart des logiciels et du matériel ici sont destinés aux casques - entreprise - et rien de tout cela n'est aussi sexy.

Kimate Richards, Sr. Strtegic Architect chez Amazon, m'aide à contrôler un robot Boston Dynamics chez AWE ... [+] 2023.

Il y avait plusieurs robots Boston Dynamic qui se promenaient. Grâce à l'équipe de prototypage AWS de Kimate Richards et Heidi Buck, j'ai pu en contrôler un avec un casque Magic Leap 2. Le casque AR transparent m'a permis de voir ce que le robot voit avec un éventail d'instructions comme s'asseoir et se coucher.

Les participants ont fait la queue pour faire la démonstration du nouveau Xreal Beam et du Magic Leap 2.

Magic Leap et les anciens Magic Leapers étaient en abondance à AWE. En plus d'Abovitz, la PDG de la société, Peggy Johnson, a prononcé un discours liminaire et présenté des cas d'utilisation médicale . Il y avait de longues files de personnes sur leur stand attendant une démo du Magic Leap 2, tout comme elles l'étaient lorsque je les ai vues pour la dernière fois au CES en janvier. Le casque a été récemment approuvé pour une utilisation dans les salles d'opération.

Le Sightful Spacetop en action.

À côté de Magic Leap sur le salon se trouvaient deux sociétés dirigées par d'anciens Leapers, Xreal (anciennement Nreal), fondée par Chi Xu et Bing Xiao, et Sightful, une société israélienne qui a récemment introduit un PC sans moniteur, Spacetop. Au lieu d'un moniteur, avec ce PC, l'utilisateur porte des lunettes AR (actuellement Xreal Light). Le processeur et le clavier sont combinés. Xreal présentait un nouveau casque, le XReal Beam. De plus, la société lance Spatial Display, une application améliorée qui permettra une meilleure compatibilité (yay !) pour ses appareils. Le nouveau casque 3DOF donnera une capacité d'ancrage à l'écran de 210 pouces projeté dans leurs réflecteurs d'écran Xreal Beam. Bien qu'il soit nouveau, il existe des développeurs comme Dan Scarfe dont l'application XRAI ajoute des sous-titres en temps réel, une traduction et ChatGPT.

Gros plan sur le minuscule projecteur à guide d'ondes et la batterie qui rendent les projecteurs Vuzix "second écran" ... [+] possibles aujourd'hui.

L'une des premières choses que j'ai vues lorsque je suis entré dans le salon, c'est le fondateur et PDG de Vuzix, Paul Traver, qui a présenté le design de référence de leurs nouveaux prolongateurs d'écran pour smartphone Vuzix Ultralite de 32 grammes, qui seront disponibles avant la fin de l'année. Vuzix y est depuis 1997, faisant de Travers l'un des véritables OG d'AR. Ce n'est pas souvent que vous voyez un PDG d'une entreprise publique sur le sol d'un salon commercial présenter sa technologie à un groupe d'étrangers pour la plupart non pertinents. Vuzix, qui a construit ses os en construisant des micro-écrans très appréciés pour des applications d'entreprise ennuyeuses, semble savourer l'opportunité d'aborder le nouveau marché de consommation.

AntReality, fabricant d'écrans à guides d'ondes accrocheurs, a présenté sa technologie optique au salon, tout comme ils l'avaient fait au CES. Les démos ont montré la capacité des lentilles AntReality qui commenceront à apparaître dans de nouveaux casques l'année prochaine. Le PDG Zheng Qin m'a dit qu'ils étaient en pourparlers avec tous les principaux acteurs du domaine XR : Apple, Amazon, Meta et Google. Leurs lentilles Cross-fire à 120 degrés basculent entre VR et AR.

Le nouveau casque de réalité mixte tout-en-un de Lenovo.

Lenovo, dont les lunettes intelligentes A3 AR sont fournies avec le kit de développement Snapdragon Spaces de Qualcomm, a également eu une grande présence sur le salon, où ils ont fait la démonstration de leurs nouveaux casques XR de réalité mixte élégants présentés aux entreprises, le Think Reality VRX. Le nouvel appareil à 1 300 $ est extrêmement léger et confortable. Lenovo exécutait une expérience VR. l'application de collaboration Engage, dont le PDG David Whelan était sur place pour discuter. Engage est un métaverse populaire pour la formation, la collaboration et l'éducation, qui abrite des dizaines d'universités et d'entreprises comme PWC.

Alex Melano teste Campfire, l'outil de collaboration de conception d'entreprise basé sur l'ancienne technologie Meta. (ICYMI Facebook/Meta a acheté la marque lors de la faillite initiale de Meta en 2018.)

Le feu de camp de Jay Wright donnait également des démonstrations dans un joli stand sur le thème du camping. Wright a précédemment créé Vuforia chez Qualcomm. Le casque Campfire a été créé à l'origine pour tirer parti de la technologie Meta originale, en la faisant passer des moniteurs virtuels à la collaboration et à la révision de conception à distance. Le système comporte plusieurs composants : le casque, des bandes de table magnétiques et un nouveau type de dalle de sol en caoutchouc qui permet aux images d'apparaître ancrées autour de vous. L'entreprise a introduit deux innovations notables. La première est que l'application est désormais complètement multiplateforme. Les PC, les tables, les téléphones et les casques peuvent tous collaborer ensemble à distance. Le casque est désormais facultatif. Wright a déclaré que son objectif était de rendre le système "simple à mort".

Lunettes TCL RayNeo X2 AR

Le chinois TCL, auparavant connu comme fabricant d'écrans de télévision à bas prix, a attiré notre attention pour la première fois au CES en janvier. La société transforme l'effort AR en une nouvelle société, qui a été initialement financée avec 15 millions de dollars. À AWE, nous avons eu la chance de faire une démonstration des lunettes TCL RayNeo X2 AR, qui ont des guides d'ondes optiques Micro-LED couleur binoculaires, capables d'effectuer une traduction en temps réel et peuvent utiliser ChatGPT. La date de sortie prévue est cet automne.

Jeri Ellsworth présente son système de jeu de table Tilt Five à l'AWE 2023.

Nous avons eu un autre regard sur Tilt 5, le système de jeu de table XR joué avec un casque AR connecté au PC. La fondatrice et PDG, Jeri Ellsworth, était sur le stand les deux jours, exprimant son cœur comme si son entreprise en dépendait (ce n'est pas le cas). Elle a dit qu'elle le faisait parce qu'elle adorait ça. Ellsworth m'a dit qu'ils expédient les systèmes de jeu AR de table Tilt5 aussi vite qu'ils peuvent les fabriquer. Le casque, la baguette et le tapis de table à 359 $ ont maintenant plus de 50 titres de jeux disponibles.

Le nouveau casque AR d'entreprise Digilens.

Digilens entre en production au troisième trimestre de son nouvel appareil ARGO, que le vice-président et directeur général Nima Shams a qualifié de remplaçant Hololens. Il pèse 200 grammes et a un champ de vision de 30 degrés. À ce jour, la société a levé plus de 150 millions de dollars. Ils utilisent Ultra Leap pour le suivi des mains, la gradation pour permettre une utilisation diurne et le contrôle vocal pour garder les mains libres des utilisateurs. Il sera inclus dans Snapchat Spaces, afin que les développeurs puissent facilement transférer le contenu XR existant sur la plate-forme. DigiLens a annoncé des partenariats avec Mojo Vision, UltraLeap, Wisear et Tactile pour étendre les capacités de ses lunettes AR qui prennent désormais également en charge Snapdragon Spaces.

La nouvelle Zapbox.

Zapbox faisait des démos privées de sa nouvelle Zapbox. Lancé à l'origine en 2017 sous le nom de "réponse de la RA à Google Cardboard, Magic Leap pour super pas cher. Le papier à faible coût a été remplacé par du plastique, de sorte que les utilisateurs n'ont pas à les construire. Le prix, 75 $ sur le site Web de Zappar, est encore extraordinairement bas. Les utilisateurs clipsent leur smartphone dans le support, lancent une application stéréoscopique (il y en a une douzaine) pour une expérience AR inégalée. Trois des thèmes que nous avons notés en développement dans l'émission sont les plateformes de développement XR sans code, la 3D écrans et systèmes de positionnement virtuels (VPS). Les quatre produits que j'ai examinés dans cette catégorie ont adopté des approches radicalement différentes. Looking Glass a présenté de nouveaux produits, dont un "Lite Form Kiosk" à 6 000 $, dans lequel un ambassadeur de la marque ou une mascotte pouvait apparaître volumétriquement. et fonctionnent sur ChatGPT. Tout leur matériel est conçu et fabriqué à Brooklyn, NY.

Sony faisait la démonstration de ses écrans Spatial Reality, qui ont été vus au NAB en avril. Les écrans 3D rivalisent avec Looking Glass en termes de prix et de qualité. Ils proposent un écran de 27 pouces pour 5 000 $ et un petit écran de 15,6 pouces à 2 600 $.

Les gens se rassemblent autour du stand de Leia pour entendre Nima Zeighami, directeur de produit chez Leia.

Le stand de Leia présentant son incroyable Lume Pad 3D avec sa tablette 3D à prix accessible, le Lume Pad 2, qui intègre ChatGPT et Stability AI pour la création d'images 3D. Les images sautent littéralement de l'écran plat et dans le monde physique. Ils semblent flotter un pied devant l'écran de 12,4". Les caméras stéréo à l'avant du pad permettent le suivi des yeux et permettent également la stéréographie, en utilisant une suite d'applications de marque Leia telles que Leia Cam, Leia Player, Leia Tube, Leia Dream, Leia Pix, la tablette Lume peut convertir à la fois des images 2D et des vidéos en 3D. Leia a remporté quatre prix de l'innovation CES en 2023.

Niantic, Snap et le japonais Psychic VR, fabricant de STYLY, utilisent des systèmes de positionnement visuel pour ancrer le contenu AR à des emplacements dans le monde physique, même si le créateur de contenu peut être à l'autre bout du monde. Ces espaces ont été scannés avec une précision remarquable. Dans le stand STYLY, j'ai pu découvrir sa RA basée sur la localisation, qui permet littéralement de peindre le monde avec des données. En effet, ils ont transformé un centre commercial en une exposition d'art. Ils espèrent qu'AWE amènera plus de développeurs sur leur système.

Les meilleures parties d'AWE sont souvent des démonstrations spontanées données par des développeurs et des entrepreneurs dans les couloirs du centre de conférence et de congrès. J'ai rencontré Jason Marsh, qui m'a montré comment son outil de visualisation de données spatiales Flow fonctionne avec le Magic Leap 2. Le développeur et entrepreneur de jeux Johnny Monsarrat a décroché une marque de science-fiction très importante et bien-aimée pour créer un jeu de plein air basé sur la localisation. Il a soulevé une graine, ce qui lui a permis de créer une démo convaincante de ce que c'est que de se promener dans un vrai parc qui a été converti en une planète extraterrestre.

Qui a dit que le Metaverse est dans des décennies ?

On n'a pas beaucoup parlé du sujet brûlant de l'année dernière, The Metaverse, mais cela ne veut pas dire qu'il est mort. Je suis tombé sur Sean Mann, PDG de RP1, dont la société a mis au point un logiciel permettant à un nombre illimité de participants en direct de partager le même espace virtuel, sans recourir à la séparation de groupes de personnes dans des pièces séparées, comme le fait Epic Games pour Fortnite, un technique appelée "sharding". Avec seulement 30 PC de jeu, a expliqué Mann, leur système prend désormais en charge 100 000 utilisateurs uniques simultanés. Avec l'ajout de PC supplémentaires, Mann pense que RP1 pourrait faire évoluer un métaverse avec un nombre illimité de participants.

Exceptionnellement petit et parfait pour les développeurs travaillant sur des projets XR.

Bobak Tavangar rencontrait des écrivains et des influenceurs pour faire la démonstration du monocle AR open source de Brilliant Labs. Il s'agit d'un devkit composé d'un monocle avec un clip qui vous permet de le fixer à la monture de vos lunettes. Ce monocle contient un petit écran AR, une caméra et deux capteurs tactiles autour de lui. Il est transparent pour que vous puissiez voir ses circuits. L'idée des créateurs est de proposer à la communauté un appareil entièrement open source et pouvant être utilisé pour expérimenter la réalité augmentée. Ce monocle est devenu très populaire il y a quelques semaines lorsque certains étudiants jouant avec lui l'ont connecté à ChatGPT et ont simulé l'utilisation de ChatGPT et AR pour donner aux gens des suggestions en direct lors d'entretiens de travail ou de rendez-vous. Lorsqu'il n'est pas utilisé, le Monocle à 350 $ peut s'asseoir à l'intérieur de son étui de chargement frais.

Le PDG de Jigspace, Zack Duff, a levé 8 millions de dollars pour son entreprise PowerPoint 3D, qui compte désormais 25 employés. Ils faisaient partie de la cohorte d'accélérateurs Boost en 2016. Le système permet d'inclure des produits 3D et des dessins CAO dans la présentation. C'est un produit SAAS qui s'est développé de manière organique comme Monocle, sans marketing, juste du bouche à oreille.

Ryan Burgoyne. Le fondateur et PDG de Skyglass m'avait cherché pendant tout le salon pour faire la démonstration de son application iPhone pour la production virtuelle. Les outils pour faire des blockbusters se démocratisent de plus en plus.

Gagnants du prix Auggie, 2023.

Les très convoités Auggie Awards d'AWE pour l'excellence en XR ont été annoncés jeudi soir, le 1er juin. Cette année, AWE a décerné un prix spécial de 100 000 $ pour les applications qui luttent contre le changement climatique, et il est allé à"Entre deux mondes », une application AR qui invite les téléspectateurs à découvrir l'art animalier comme ils ne l'ont jamais vu auparavant : scanner les animaux en voie de disparition avec votre appareil mobile leur donne vie pour révéler les innombrables menaces qui pèsent non seulement sur eux, mais aussi sur leurs habitats. Vous pouvez trouver tous les gagnants du prix Auggie ici.

Peut-être que si nous les avions utilisés, cela aurait évité de propager ce rhume de cerveau.

Je suis rentré à la maison avec un méchant rhume de cerveau, le résultat de trois jours de salles bondées et bruyantes avec des gens qui parlent à cause du volume et des casques partagés. J'ai passé un test COVID (négatif, Dieu merci) avant de monter dans un avion mais écrire ce récapitulatif n'a pas été facile en transpirant de la fièvre.

Je n'ai pas pu tout voir et parler à tout le monde, bien sûr, et presque tous les exposants avaient des nouvelles, alors AWE les a soigneusement rassemblées ici.

Enfin, après quatorze ans au Santa Clara Convention Center, AWE USA 2024 déménagera au Long Beach Convention & Entertainment Center dans le sud de la Californie, aux États-Unis, du 18 au 20 juin 2024.