Le guide de la réalité virtuelle

Étiquette : réalité mixte

  • Comment réaliser des expériences de réalité mixte comme un magicien

    Comment réaliser des expériences de réalité mixte comme un magicien

    Lorsqu’un magicien monte sur scène ou s’approche d’un spectateur pour l’inviter à son spectacle, l’impatience du public est palpable. Le public est intrigué par la magie non pas parce qu’il s’agit d’un spectacle de tours, mais en raison de sa capacité à susciter l’émerveillement et l’admiration face à des impossibilités qui se déroulent dans leur réalité physique.

    Comment réaliser des expériences de réalité mixte comme un magicien

    La réalité mixte brouille les frontières entre les réalités numériques et physiques, offrant ainsi un terrain de jeu plus propice à la magie. Elle permet également d’introduire la magie dans l’environnement personnel du public. Dans mes conférences, je partage souvent ma formule pour créer des moments magiques. La magie est la somme d’une connaissance approfondie du public, d’une narration solide et d’une technologie appropriée. Et cette technologie doit être aussi invisible que le tour de passe-passe du magicien. Les créateurs peuvent créer des moments magiques en utilisant la réalité mixte en investissant dans la construction d’un monde solide, dans la connaissance du public et de ses réalités physiques, et en exploitant la puissance des fonctions technologiques les plus pertinentes.

    Les émotions donnent à la magie une dimension réelle

    Les émotions aident les magiciens à contrôler l’attention du public. Elles donnent également à la magie une dimension réelle.

    Si les illusions sont des tours, la magie est aussi réelle que les émotions ressenties par le public. C’est l’expérience vécue par le public après avoir assisté à des moments magiques qui rend la magie réelle. Lorsqu’il s’agit de réalité mixte, les moments magiques peuvent prendre de nombreuses formes. Comme l’a dit David Copperfield, « ce qui compte, ce n’est pas l’illusion, c’est l’illusion et la raison pour laquelle elle se produit ». La narration permet aux gens de s’intéresser à ce qui se passe.

    Curtis Hickman est cofondateur et directeur de la communication de The VOID et auteur de Hyper-Reality : The Art of Designing Impossible Experiences. Pour lui, les moments magiques de la réalité mixte se produisent le plus souvent lorsque « les mondes numérique et physique convergent de manière transparente, créant une expérience qui semble impossible ». C’est cet instant fugace où les utilisateurs oublient qu’ils interagissent avec la technologie et sont complètement immergés dans l’expérience mixte, ressentant une véritable surprise, de l’émerveillement et de l’admiration. La magie est un sentiment que nous devrions aspirer à créer pour le public.

    Magicien en MR : Les émotions

    Greg Madison est un ancien magicien analogique, qui fabrique aujourd’hui des illusions numériques en tant que concepteur d’interactions dans le domaine de l’informatique spatiale depuis des décennies. Il explique que la réalité mixte offre encore plus de possibilités en matière d’émotions. « La réalité mixte positionne l’individu à la fois comme spectateur et comme magicien, l’embarquant dans un voyage personnel pour découvrir ses propres superpouvoirs et dévoiler où réside la magie. La façon dont il veut que le public se sente dans une expérience est une décision qu’il prend au début d’un projet. « Je commence par imaginer l’illusion que je veux créer, en tenant compte du contexte, de la narration et des émotions que je souhaite susciter chez le public.

    Nicole Lazzaro, présidente et fondatrice de XEOPlay, est fascinée par la magie depuis son enfance. Son premier projet professionnel a été la production et la conception d’un CD-I qui enseignait la magie, et elle connaît la valeur de la compréhension profonde du public, ayant été l’une des premières personnes à mesurer les émotions sur les visages des gens pendant qu’ils jouaient. Mme Lazzaro se penche actuellement sur les émotions que la magie peut susciter dans le jeu d’aventure mystérieux XR intitulé Follow the White Rabbit (Suivez le lapin blanc), qui sortira bientôt.

    « Notre objectif est de susciter l’émerveillement, de créer les émotions de la magie… et non de recréer des tours de magie… Vous ne ressentirez pas la magie si un public reçoit simplement un chapeau magique », explique-t-elle, peu importe ce qu’il en sort. C’est parce que le joueur sait qu’il s’agit d’un chapeau virtuel. Par conséquent, pour créer un sentiment de magie, ces émotions doivent provenir « de ce que les joueurs font réellement dans le monde… L’émerveillement est en fait la récompense de l’apprentissage ».

    Différentes échelles peuvent véhiculer différents types d’émerveillement

    Stephen Macknik, professeur et associé de NeuroExperts et coauteur de Sleights of Mind, explique que « différentes échelles de magie… transmettent différents types d’émerveillement ». Par exemple, en magie rapprochée, « vous êtes sur place. Vous pouvez saisir les objets dans votre main. Vous êtes dans votre espace personnel. Il semble impossible que [les magiciens] utilisent des technologies ».

    La magie rapprochée se déroule souvent sur une table partagée par le magicien et le public, ou à une distance similaire. En outre, la magie de salon se déroule souvent dans une petite pièce dont la taille peut être similaire à celle d’un salon moyen. Enfin, la magie de scène est souvent associée à des illusions plus grandioses. En réalité, les sentiments que les magiciens peuvent inspirer changent en fonction de la proximité du spectacle et de votre niveau d’interactivité avec celui-ci. Cela a même un impact sur le rôle que vous pouvez jouer dans l’histoire qui prend vie. Lorsqu’il s’agit de réalité mixte, les émotions possibles vont du close-up et de la magie de salon aux grandes illusions, car la réalité mixte peut tout montrer, des portails vers d’autres espaces ou des transports complets vers un environnement immersif où l’échelle peut varier de manière plus spectaculaire.

    Utiliser les objets courants

    Susana Martinez-Conde, professeur, partenaire de NeuroExperts et co-auteur de Sleights of Mind, explique que les illusions magiques peuvent ressembler à des expériences fortes lorsque les magiciens utilisent des objets de tous les jours. Ces objets sont souvent présents dans la magie de proximité ou la magie de salon. Les magiciens font circuler ces objets de tous les jours pour que le public les examine et interagisse physiquement avec eux, afin qu’ils identifient qu’ils « sont réels et… n’ont pas été manipulés ». Le défi qu’elle lance aux créateurs consiste à trouver des moyens de conserver ce sentiment d’émerveillement lorsque le public est invité à manipuler la réalité artificielle. Pour relever ce défi, on pourrait commencer par laisser les gens inspecter des objets du monde réel, qui pourraient conserver leurs propriétés physiques mais créer de nouvelles réactions aux réalités numériques dans le cadre d’une expérience.

    Créer de nouvelles règles à enfreindre

    La magie défie souvent ce qui est perçu comme impossible dans la réalité du public, avec des effets qui sont rendus vivants par le magicien. La réalité mixte donne aux créateurs la possibilité de défier les impossibilités perçues dans l’environnement réel du public ainsi que dans les réalités numériques totalement immersives d’une expérience.

    « Alors que la magie traditionnelle a toujours été liée aux contraintes physiques d’une scène et à la présence d’un magicien, explique M. Hickman, la réalité mixte transcende ces limites. Elle invite les utilisateurs à entrer dans un monde où la magie n’est pas seulement une chose à laquelle ils assistent, mais quelque chose qu’ils expérimentent activement dans leur propre environnement familier. Ce passage profond de l’observation passive à la participation active contribue à réimaginer la relation entre le public et les expériences magiques. Il favorise une connexion profondément personnelle et immersive, faisant en sorte que la magie soit moins perçue comme un spectacle éphémère et plus comme une partie intégrante de la réalité de chacun ».

    M. Lazzaro explique que pour que les moments magiques paraissent réels, les magiciens doivent encadrer la situation en montrant comment le monde fonctionne, puis en le renforçant. Un exemple classique est celui d’un magicien qui montre qu’une boîte est creuse ou qu’il tient un vrai fruit. Cela permet de montrer comment les choses devraient fonctionner en fonction de ce dont le public est témoin. J’ai donné des exemples de ce type pour la VR, que Hickman appelle « arguments mentaux ». Des émotions telles que l’émerveillement peuvent survenir lorsque ce cadre est brisé et que quelque chose d’apparemment impossible se produit.

    Intégration d’objets dans l’illusion

    La réalité mixte apporte des espaces et des objets réels dont les règles d’existence peuvent être brisées. Même les contrôleurs peuvent être intégrés dans l’illusion. Madison explique qu’une partie de son processus consiste à « identifier des accessoires pour rendre l’illusion numérique tangible ». L’accessoire agit comme un contrôleur déguisé, mais inconsciemment, c’est comme remettre un jeu de cartes au début d’un tour de magie, ancrant l’illusion dans la réalité. Par exemple, si les participants doivent contrôler des entités volantes, jeter des sorts ou invoquer des divinités élémentaires, je fabriquerai un bâton de magicien fusionnant des éléments virtuels et réels, au lieu d’utiliser la manette standard comme manette ».

    Connaître son public, y compris sa réalité physique

    Comme je l’ai mentionné dans l’introduction de cet article, une connaissance approfondie du public fait partie de ma formule pour créer des moments magiques. En ce qui concerne la réalité mixte, cela signifie qu’il faut aller bien au-delà de la compréhension des aspirations, des connaissances et même des capacités physiques de votre public. Vous devez comprendre les réalités physiques de leur environnement, qu’il s’agisse de l’empreinte typique dans laquelle ils se déplacent ou des objets physiques typiques qu’ils peuvent avoir avec eux.

    Selon M. Hickman, « les créateurs doivent commencer par comprendre l’environnement physique et le point de vue de l’utilisateur dans cet espace. Pensez à la façon dont les éléments numériques peuvent interagir avec le monde réel de manière inattendue. » Une illusion de réalité mixte « vise à étendre la réalité avec des éléments numériques », explique Madison. C’est au créateur qu’il revient de déterminer quelle réalité est étendue.

    Le contenu peut créer des liens entre les réalités physiques et numériques avec des causes et des effets. Martinez-Conde explique que « nous relions la cause et l’effet alors que nous ne devrions pas le faire… comme si nous utilisions une baguette magique et qu’un effet se produisait alors qu’en réalité ces deux choses n’ont rien à voir l’une avec l’autre ». Madison crée souvent ce lien en utilisant des objets physiques pour « diriger l’attention et créer un pont sensoriel, contribuant à l’établissement d’une suspension de l’incrédulité….e « moment magique » se produit lorsque le cerveau commence à douter de ce qui est physiquement présent et de ce qui est virtuel, ébranlant ainsi nos certitudes sur la réalité elle-même ».

    Expériences MR comme un magicien : Les surfaces

    N’ayez pas peur des surfaces réfléchissantes. Partez du principe qu’elles sont présentes chez la plupart des spectateurs et qu’en les évitant, vous risquez de passer à côté d’un détail qui pourrait faire ou défaire une illusion. L’idée de Martinez-Conde d’utiliser un miroir pour changer la façon dont nous nous voyons dans la réalité est un exemple de la manière dont on peut s’y prendre pour les utiliser. En réalité, les miroirs inversent notre image. Nous pouvons utiliser la réalité mixte pour prendre cette image et la retourner de sorte qu’un membre du public se voit comme les autres le voient. Et, « pour les surfaces physiques réfléchissantes telles que les sols brillants, les tables en verre, les fenêtres », Madison suggère de créer « des reflets en utilisant une géométrie dupliquée en miroir avec une certaine transparence, et d’utiliser un niveau de détail inférieur si nécessaire ».

    Madison suggère également d’utiliser des photos ou des vidéos à 360 degrés de l’espace physique comme sondes de réflexion pour renforcer l’illusion. Hickman est très enthousiaste quant aux possibilités offertes par la cartographie haute fidélité de l’environnement en temps réel. 

    « Plus la précision sera grande, meilleure sera la base des grandes illusions », explique-t-il.

    Au-delà de l’intégration d’éléments physiques de l’environnement, il ne faut pas sous-estimer le pouvoir de l’intégration d’un spectateur, en particulier de ses mains, dans l’illusion numérique. Mme Lazzaro explique qu’il est possible de faire naître de nombreuses émotions en interagissant avec un objet réel ou numérique, en le tenant ou même en utilisant ses mains pour jeter des sorts. « C’est très personnel », explique-t-elle, et la sensation doit être fluide.

    expériences MR comme un magicien

    L’art du magicien se nourrit de subtilité

    « L’art de la magie se nourrit de subtilité », explique Hickman. « Ses effets les plus profonds sont souvent ressentis lorsqu’elle opère dans l’ombre, sans être remarquée, mais en ayant un impact profond. 

    En plus de s’assurer que certains éléments comme l’éclairage et les ombres renforcent la réalité, Madison évalue la force de ses moments magiques en recherchant des indices subtils : « Étonnamment, il m’arrive de fermer les yeux pour repérer ce qui ne va pas, car je comprends qu’une illusion parfaite ne se limite pas à l’aspect visuel : elle doit peser, sentir, se comporter et sonner juste.

    Il est essentiel de faire de longues pauses, car en y repensant avec un regard neuf, on découvre souvent de nouveaux éléments subtils qui brisent ou renforcent les illusions. À titre d’exemple, il a un jour prototypé un jeu de roll-a-ball en réalité mixte dans lequel les joueurs pouvaient incliner un cadre physique réel pour guider une sphère virtuelle. J’ai attaché un contrôleur pour suivre le cadre, et ce qui a convaincu mon cerveau de la « réalité » et de la « présence » de la bille, c’est le retour tactile des moteurs de vibration transmis à mes mains via l’objet lorsque la bille virtuelle roulait et heurtait les limites. Cette illusion spécifique peut être expérimentée dans Eleven VR Table Tennis ou Walkabout Mini Golf. »

    La réalité mixte permet et exige des effets riches

    La fusion transparente des réalités physique et numérique dans le cadre d’une expérience de réalité mixte renforce le besoin de graphismes apparemment réels et d’un son spatial. La bonne nouvelle, c’est que la réalité semble déjà réelle et ne nécessite pas de puissance de calcul.

    « Dans la réalité mixte, l’alignement et l’interaction entre les éléments réels et numériques sont cruciaux, et toute erreur d’alignement peut gâcher l’expérience. La fidélité graphique et la cohérence avec l’environnement physique sont essentielles – encore plus que dans la VR » explique Hickman. « Pour nous, cela brise l’illusion car cela sépare clairement le virtuel du réel », déclare Lazzaro. En outre, son équipe se concentre sur les casques dotés d’un filtre de couleur qui permet de fusionner les mondes. La réalité peut même être filtrée pour se fondre dans l’apparence du monde numérique. 

    La magie n’a pas besoin de se dérouler tout autour d’un environnement pour sembler réelle. Dans la réalité mixte, Madison explique que c’est le contenu numérique qui occupe le devant de la scène. Cela permet « d’utiliser la puissance de calcul redirigée pour améliorer les effets coûteux mentionnés plus haut et renforcer l’illusion ».

    Réaliser des expériences MR comme un magicien

    Réfléchissez également à l’endroit et au moment où la magie de votre contenu de réalité mixte prend vie, car il faut du temps pour que les yeux s’adaptent aux différentes distances. Macknik explique que « lorsque vous regardez quelque chose de près, vos yeux convergent, ils tournent l’un vers l’autre. De loin, mes yeux ne se croisent pas autant….vos yeux changent automatiquement leur niveau d’accommodation ». 

    Si votre illusion risque d’être gâchée par des limites techniques telles qu’un suivi imparfait ou le conflit vergence-accommodation, vous devriez intégrer des moyens de masquer la limitation par un effet dans le contenu lui-même.

  • Qu’est-ce que la réalité mixte et comment fonctionnent les casques XR ?

    Qu’est-ce que la réalité mixte et comment fonctionnent les casques XR ?

    De plus en plus de casques XR arrivent sur le marché. Mais la réalité mixte est souvent définie de manière trompeuse. Nous remettons les pendules à l’heure.

    Qu'est-ce que la réalité mixte et comment fonctionnent les casques XR ?

    Qu’est-ce que la réalité mixte ?

    En 1994, le chercheur en interface Paul Milgram a défini la réalité mixte comme un continuum dans lequel existent des technologies immersives individuelles telles que la RV, la RA ou la RA basée sur la vidéo (RA par transparence).

    Dans sa définition perspicace, la réalité mixte est un état caractérisé par le degré de mélange entre le monde réel et le contenu numérique. La réalité mixte peut théoriquement se manifester dans un appareil tant qu’il peut gérer une certaine forme de RV et une certaine forme de RA.

    En quoi les casques VR, AR et XR sont-ils différents ?

    Les lunettes de réalité mixte sont donc des casques capables de gérer la RV et la RA, ainsi que toutes les formes de mélange de la réalité numérique et physique selon le continuum de réalité mixte défini par Milgram et Kishino.

    Avec un casque de réalité mixte, vous pouvez soit masquer complètement la réalité physique et la remplacer par une réalité virtuelle (VR). Soit vous la reconstruisez numériquement dans le casque (grâce à la technologie passthrough) et l’améliorer avec des éléments numériques (réalité augmentée).

    Dans les casques de réalité virtuelle, l’environnement physique apparaît sur des écrans opaques et est entièrement numérique, contrairement aux casques de réalité augmentée dotés d’optiques translucides, comme Hololens 2 ou Magic Leap 2. Ici, l’environnement physique reste visible à travers un morceau de verre ou de plastique et est sélectivement recouvert par des éléments numériques projetés directement dans l’œil.

    Le casque de réalité mixte Varjo XR-3 est doté de capteurs frontaux qui capturent l’environnement physique, comme des « yeux artificiels ». Il n’y a pas de vision directe de la réalité physique. 

    La technologie Pass-through

    Le secteur assimile souvent la réalité mixte à une technologie de type « pass-through » et fait une distinction inutile entre la réalité mixte et la réalité augmentée : si la première permet une interaction plus forte entre la réalité numérique et la réalité physique, la seconde ne fait qu’étendre et améliorer la réalité physique, dit-on.

    Or, les casques de réalité mixte et les casques de réalité augmentée font la même chose, mais reposent sur une technologie différente.

    La technologie passthrough des casques de réalité mixte présente de nombreux avantages, mais aussi des inconvénients par rapport aux systèmes à optique transparente. Comme il n’existe pas encore d’écrans suffisamment performants pour les casques de réalité augmentée (voir : État de la technologie de la réalité augmentée), l’industrie fait un détour par les casques de réalité mixte, tandis que la recherche et le développement sur les écrans de réalité augmentée se poursuit.

    Comment fonctionnent les casques de réalité mixte ?

    Parmi les exemples de casques de réalité mixte existants, citons Meta Quest Pro, Varjo XR-3 et Lynx R-1, tandis que le premier casque d’Apple sera également un dispositif de réalité mixte, selon de nombreux rapports.

    Les casques de réalité mixte capturent l’environnement physique à l’aide de caméras intégrées au casque. Des algorithmes reconstruisent ensuite une vue stéréoscopique du monde et l’affichent sur des écrans opaques.

    Cette technologie dite « passthrough » n’est pas nouvelle et est utilisée depuis longtemps dans des appareils comme le Meta Quest 2. Toutefois, la qualité de l’image est généralement assez médiocre. Même les casques de réalité mixte plus récents, comme le Meta Quest Pro, sont loin de rendre l’environnement physique parfait.

    La transparence est plus impressionnante avec l’appareil professionnel Varjo XR-3, dont le prix est élevé. La vidéo suivante montre un utilisateur enfilant un fil en utilisant la vue passthrough. Cet exemple montre à quel point cette technologie peut fonctionner avec des capteurs de haute qualité et des écrans haute résolution.

    Il reste cependant de gros obstacles à surmonter pour faire progresser la technologie de la vue directe, comme le montre un récent article publié par Meta.

  • Avatar Dimension met un studio de capture de réalité mixte à la portée des clients

    Avatar Dimension met un studio de capture de réalité mixte à la portée des clients

    Avatar Dimension lance un studio mobile pour la capture vidéo volumétrique sur site.

    Avatar Dimension a récemment annoncé que son studio de capture volumétrique en réalité mixte est désormais disponible pour les tournages sur site. C’est une excellente nouvelle pour les entreprises qui souhaitent tirer parti des vidéos holographiques 3D pour capter l’intérêt de leur public.

    Avatar Dimension est le seul studio de capture de réalité mixte de Microsoft sur la côte Est. Avatar Dimension est le fruit d’une collaboration entre Avatar Studios (une agence de création), Dimension Studio (un studio de production virtuelle et XR) et Sabey Data Centers (le plus grand opérateur privé de centres de données des États-Unis). Dirigée par son PDG, Dennis Bracy, la société a cherché à répondre à l’objection commune de nombreux clients qui souhaitaient profiter de ses services.

    Amener un studio de capture de réalité mixte là où se trouve l’action

    Avatar Dimension sert un large éventail de clients, des entreprises aux agences militaires et gouvernementales. Les images vidéo holographiques se sont avérées plus attrayantes et mieux à même de répondre aux objectifs de ces organisations.

    Studio Avatar Dimension
    Studio Avatar Dimension

    Malgré l’intérêt croissant, les studios de capture de réalité mixte sont généralement peu flexibles, ce qui empêche les entreprises de concrétiser leurs visions 3D. Les équipements lourds et les défis logistiques sont les principales raisons pour lesquelles les clients n’ont que la possibilité de tourner dans un studio physique.

    Avatar Dimension a vu une opportunité. Elle a créé une scène transportable composée de la même technologie que celle présente dans son studio physique. La scène mobile comprend 70 caméras Volucam de 12 mégapixels d’IO Industries. Elle est également équipée du pipeline de capture et de rendu de Microsoft. Ensemble, la scène permet de capturer l’action à grande échelle. Grâce à la puissance de Microsoft Azure, les fichiers vidéo sont ensuite fusionnés pour créer des hologrammes en 3D. Ces hologrammes peuvent être intégrés à des récits, des lieux, des jeux et des expériences.

    Le montage de l’ensemble de l’installation prend trois jours. Une fois sur place, l’équipe peut réaliser autant de prises de vue volumétriques que nécessaire pour donner vie à un projet.

    « Le fait d’apporter notre scène de capture volumétrique directement aux clients ouvre la porte à de nombreuses entreprises qui souhaitent élargir leur audience grâce à des expériences innovantes en réalité mixte, mais qui ont besoin que la session de capture vienne à eux », a déclaré M. Bracy dans un communiqué de presse.

    Le saut de la 2D à la 3D

    Avatar Dimension était autrefois une entreprise traditionnelle de films et de vidéos dont les fondateurs ont vu une opportunité dans la production 3D. M. Bracy appelle cela « la prochaine vague médiatique ». Il pense que les smartphones et les logiciels de montage vidéo ont entravé les activités vidéo traditionnelles. Toute personne disposant d’un iPhone peut désormais créer des vidéos.

    Les sociétés de vidéo et de cinéma doivent passer à la vitesse supérieure si elles veulent se démarquer. M. Bracy a vu le potentiel de la création de contenu en 3D. Sa société a contacté Microsoft, estimant que cette dernière disposait de la meilleure technologie de capture volumétrique. Après avoir passé des tests rigoureux, Avatar Dimension a été désigné comme le studio exclusif de capture de réalité mixte de Microsoft sur la côte Est.

    Depuis lors, l’entreprise a réalisé plusieurs projets. Parmi ses projets récents et notables, citons :

    • Le site de visite virtuelle du St. Louis Center of Creative Arts (COCA) ;
    • L’avatar holographique du lieutenant-colonel Jake Sotiriadis, Ph.D., de l’US Air Force, utilisé pour une présentation en réalité virtuelle ;
    • la performance virtuelle de Ryan Sims sur son single « Song About Us ».

    Grâce à la scène de capture volumétrique transportable de la société, M. Bracy pense que de plus en plus d’entreprises se tourneront vers les expériences de réalité mixte pour attirer les clients. L’entreprise a déjà mené à bien un projet d’envergure impliquant 1 000 captures sur site en Nouvelle-Angleterre.

    L’avenir de la vidéo est dans la réalité mixte 

    Les consommateurs sont toujours à la recherche de contenus de meilleure qualité et plus attrayants. Les expériences immersives sont l’évolution naturelle des images plates et des vidéos en 2D qui prévalent aujourd’hui.

    Microsoft Mixed Reality Capture Studios s’est donné pour mission de rendre la création d’hologrammes accessible aux créateurs. Ils sont convaincus que les générations futures s’attendront à interagir avec du contenu spatial. Microsoft Mixed Reality Capture Studios est en tête du peloton en formant la technologie nécessaire pour créer facilement du contenu volumétrique.

    Avatar Dimension
    Avatar Dimension

    Avec Microsoft comme partenaire, Avatar Dimensions assure son avenir dans ce domaine. L’entreprise prévoit de proposer des services de capture volumétrique et de production holographique et en réalité mixte à des secteurs tels que la formation, le gouvernement, le marketing et le divertissement. Elle s’aventure également dans les casques de réalité mixte, les plateformes 5G, l’IA et les humains numériques.

  • Guide du tutoriel LIV VR : Enregistrement vidéo en réalité mixte sur Oculus Quest

    Guide du tutoriel LIV VR : Enregistrement vidéo en réalité mixte sur Oculus Quest

    Dans ce guide LIV VR, nous vous montrons comment créer des vidéos en réalité mixte sur Oculus Quest avec votre téléphone. Faites votre propre rendu en VR sans post-production !

    Guide du tutoriel LIV VR : Enregistrement vidéo en réalité mixte sur Oculus Quest
    Guide du tutoriel LIV VR : Enregistrement vidéo en réalité mixte sur Oculus Quest

    LIV VR est une application iOS qui vous permet de vous enregistrer facilement en direct dans la réalité virtuelle. Votre environnement VR est automatiquement rendu dans la vidéo sans aucune post-production nécessaire. Vous trouverez ci-dessous un guide didactique complet sur le logiciel de réalité mixte LIV Oculus Quest.

    Nous allons aborder les points suivants :

    • Ce qu’est LIV plus en détail.
    • Quels jeux sont actuellement supportés ?
    • Comment s’enregistrer avec LIV ?
    • Comment réaliser de superbes enregistrements en réalité mixte avec Oculus Quest.

    Si vous souhaitez présenter une vidéo que vous avez réalisée avec l’application LIV, commentez en bas de notre guide. Nous ajouterons votre vidéo à la section « Showcase » ci-dessous.

    Qu’est-ce que LIV VR ?

    LIV VR est un logiciel qui vous permet d’enregistrer des vidéos en réalité mixte Oculus Quest sur votre téléphone pendant que vous jouez en réalité virtuelle. Les applications compagnons sur votre téléphone (iOS) et Oculus Quest synchronisent votre environnement pour vous enregistrer exactement comme vous êtes dans le jeu.

    Il n’y a pas d’écran vert ni de matériel supplémentaire requis pour utiliser LIV VR. Et l’installation, que nous verrons plus loin, est aussi simple que ce qui est annoncé.

    Caractéristiques

    Le logiciel LIV VR est plein de fonctionnalités très intéressantes :

    • Pas de post-production nécessaire pour créer une vidéo de vous en train de jouer en VR.
    • Vous pouvez interagir avec les téléspectateurs et les followers de Twitch pendant que vous jouez.
    • Filtres et correction des couleurs intégrés
    • Vous pouvez configurer plusieurs profils qui peuvent être changés facilement

    LIV est le moyen le plus simple de créer des vidéos en réalité mixte Oculus Quest. Nous vous présentons ci-dessous les jeux pris en charge et vous expliquons comment vous lancer.

    Configuration requise

    Les conditions suivantes sont nécessaires pour capturer des vidéos en réalité mixte Oculus Quest :

    • Wi-Fi rapide (5 GHz de préférence) pour rendre la vidéo de votre jeu en temps réel.
    • iPhone XR ou iPad 2018 ou mieux – Le chipset A12 est nécessaire pour rendre la vidéo en utilisant la technologie de LIV.

    Le téléphone A12 est requis uniquement pour le mode de réalité mixte. Si vous voulez juste vérifier le mode Watch, vous avez seulement besoin d’une connexion internet rapide.

    Modes Watch et Mixed Reality

    Le mode Watch de LIV permet de regarder un jeu en réalité virtuelle à partir d’une vue fixe. Vous ne serez pas visible dans la vidéo, mais vous serez en mesure de capturer une vidéo VR de base. C’est un moyen facile de s’asseoir et de regarder le jeu. Vous n’avez pas besoin de calibrer ou de passer par une quelconque configuration. Après avoir téléchargé l’application LIV VR ci-dessous, vous pouvez passer directement en mode « Watch ».

    Le mode Réalité Mixte (MR) vous permet de vous capturer dans votre univers de jeu VR. La réalité mixte mélange le monde réel (vous) avec le monde du jeu (VR) en temps réel. Vous pouvez installer votre iPhone sur un trépied, l’appuyer contre un objet ou demander à quelqu’un de tenir votre téléphone et de se déplacer. Le mode réalité mixte nécessite un peu plus de configuration et de calibrage pour démarrer. Nous vous expliquons tout cela ci-dessous.

    Jeux pris en charge

    LIV VR travaille constamment sur le support de nouveaux jeux de réalité virtuelle. Les jeux suivants sont supportés jusqu’à présent :

    • Beat Saber (doit activer la Réalité Mixte dans les paramètres du jeu)
    • Crisis VRigade
    • Cubisme 
    • Hyper Dash
    • OhShape
    • Premium Bowling
    • Real VR Fishing
    • Smash Drum
    • Space Pirate Trainer  
    • SuperHot VR
    • Synth Riders 
    • Topgolf avec Pro Putt

    Ensuite, nous allons vous montrer comment créer vos propres vidéos en réalité mixte Oculus Quest.

    Comment créer une vidéo en réalité mixte sur Oculus Quest avec LIV VR

    Ce tutoriel vous montre comment créer vos propres vidéos en réalité mixte Oculus Quest en utilisant l’application LIV VR sur votre iPhone.

    Durée totale : 8 minutes

    Installez Testflight sur votre iPhone

    Tout d’abord, vous devez télécharger l’application Testflight sur votre iPhone. Cette application est utilisée pour accéder à l’application LIV, qui est considérée comme étant en version bêta.

    Installez l’application LIV VR

    Téléchargez l’application LIV iOS via Testflight, qui l’installera sur votre téléphone.

    Installez LIV Connect sur votre Oculus Quest

    Enfin, vous devez télécharger LIV Connect sur votre Oculus Quest, qui se trouve dans l’App Lab.

    Lancez LIV Connect

    Lancez l’application LIV Connect dans votre Oculus Quest. Elle devrait automatiquement trouver et se connecter avec votre téléphone.

    Lancez l’application LIV iOS et commencez le jeu

    Lancez l’application LIV et appuyez sur le bouton Start Game.

    Calibrez vos contrôleurs

    Suivez les instructions de votre téléphone pour calibrer vos manettes sur la caméra. Une fois que vous avez terminé, vous pouvez installer votre téléphone sur un trépied ou appuyé contre des livres. Dirigez-le vers l’espace de jeu de votre gardien.

    Lancez le jeu et synchronisez-le avec l’application LIV

    Lancez un jeu Oculus Quest pris en charge dans votre casque. Vous quitterez alors l’application LIV Connect. Ensuite, cliquez sur le bouton Start de votre application LIV pour synchroniser l’application avec le jeu de votre casque.

    Le jeu apparaîtra alors en cours d’exécution dans LIV et vous pourrez commencer à capturer la réalité mixte ! Vous ne verrez pas de visuels LIV dans votre casque Quest lorsque vous jouez à un jeu, mais l’application fonctionne en arrière-plan.

    Comment enregistrer votre vidéo LIV VR

    1. Pour enregistrer votre vidéo LIV, vous devez utiliser iOS 14 ou une version ultérieure.
    2. Ajoutez l’option d’enregistrement à votre téléphone en allant dans Réglages > Centre de contrôle, appuyez sur Plus de contrôles, puis sur le bouton Ajouter (à côté de Enregistrement d’écran).
    3. Ouvrez le Centre de contrôle sur votre iPhone ou sur votre iPad.
    4. Touchez et maintenez le bouton gris d’enregistrement, puis touchez Microphone.
    5. Touchez Démarrer l’enregistrement, puis attendez le compte à rebours de trois secondes. 
    6. Pour arrêter l’enregistrement, ouvrez le Centre de contrôle sur votre iPhone, touchez le bouton rouge d’enregistrement.

    Comment calibrer votre vidéo LIV VR

    Si le calibrage de votre application Liv et de votre casque est confus dans la procédure ci-dessus, voici un résumé de ce que vous devez faire :

    1. Tenez votre appareil mobile dans votre main sans couvrir la caméra arrière. Essayez d’éviter de secouer excessivement l’appareil pendant ce processus.
    2. Placez votre manette droite sur le cercle vert de l’écran, aussi près et précisément que possible.
    3. Appuyez sur la gâchette et maintenez-la enfoncée pendant trois secondes.

    Conseils

    Voici quelques conseils pour obtenir le meilleur alignement possible de la manette dans l’application LIV.

    • Évitez de couvrir l’objectif de la caméra arrière lorsque vous tenez votre appareil mobile.
    • Évitez de secouer votre appareil mobile (pensez à utiliser un trépied ici – vous en aurez besoin plus tard).
    • Assurez-vous que votre manette est à plat sur l’écran de la caméra lorsque vous appuyez sur la gâchette. Si l’étui de votre appareil vous gêne, pensez à le retirer pour cette étape (uniquement si vous obtenez de mauvais résultats).

    Comment partager vos vidéos LIV VR

    Il est facile de partager les vidéos de réalité mixte Oculus Quest que vous créez. Localisez la vidéo que vous avez enregistrée dans votre application Photos et appuyez sur le bouton de partage dans le coin inférieur gauche. Ensuite, sélectionnez la plateforme sur laquelle vous souhaitez partager votre application.

    Vitrine vidéo LIV

    https://youtu.be/AXlZIKyh75k

    LIV FAQ

    Quand le support Android sera-t-il disponible ?

    Pour le moment, l’application mobile Liv VR n’est pas disponible pour les téléphones Android. Le développeur espère que le support Android sera disponible d’ici la fin 2021.

    Qu’en est-il de la version Steam VR de LIV ?

    Notre guide tutoriel ci-dessus est destiné aux utilisateurs de l’Oculus Quest sans fil qui utilisent leurs téléphones pour créer des vidéos. Le produit original de LIV est une application Steam VR qui vous permet de créer des vidéos en réalité mixte en utilisant n’importe quel casque VR pour PC. Pour commencer, consultez l’application LIV sur Steam.

    Quels sont les casques VR supportés (Version Steam VR) ?

    LIV pour Windows et Steam VR peut être configuré et utilisé avec les casques VR suivants :

    • Valve Index
    • HTC VIVE
    • HTC VIVE Pro (1 et 2)
    • Oculus Rift S et CV1
    • Oculus Quest 1 ou 2 avec un câble Link ou Air Link activé
    • Casques de réalité mixte Windows

    Si vous utilisez un appareil Oculus, assurez-vous d’ajouter « -vrmode openvr » aux paramètres de lancement de LIV sur Steam.

    Avez-vous d’autres questions ou commentaires sur notre tutoriel LIV VR ? Commentez ci-dessous et faites-nous en part. 

  • Comment l’intelligence artificielle peut révolutionner les technologies AR, VR et MR

    Comment l’intelligence artificielle peut révolutionner les technologies AR, VR et MR

    L’intelligence artificielle est une technologie puissante qui peut améliorer encore les domaines des technologies émergentes telles que l’AR, la VR et la MR.

    Comment l'intelligence artificielle peut révolutionner les technologies AR, VR et MR
    Comment l’intelligence artificielle peut révolutionner les technologies AR, VR et MR

    L’intelligence artificielle est une technologie polyvalente qui englobe un large éventail d’aspects de notre vie quotidienne, notamment les technologies émergentes telles que la réalité augmentée, la réalité virtuelle et la réalité mixte. Elle est utilisée dans divers domaines, notamment la médecine, l’éducation, le marketing, les jeux et la fabrication, pour automatiser les flux de travail et les processus, offrir des expériences plus personnalisées aux consommateurs, prévoir les tendances du marché et développer des véhicules intelligents à conduite autonome.

    Comment l’intelligence artificielle est-elle utilisée pour améliorer les technologies émergentes, en particulier la RA, la RV et la RM ?

    L’intelligence artificielle dans la RA 

    La réalité augmentée utilise la technologie pour améliorer notre vie quotidienne. Elle fonctionne en superposant du contenu ou des informations numériques sur des objets ou des lieux du monde réel sans distraire les utilisateurs. Elle est déjà utilisée dans des applications de fabrication et de navigation pour aider les utilisateurs humains. Cependant, certaines stratégies qui utilisent la RA sont limitées par des approches traditionnelles et sans l’IA.

    En intégrant des composants d’IA, tels que l’apprentissage profond et l’ontologie, à la RA, ces stratégies peuvent être grandement améliorées. Par exemple, l’algorithme d’intelligence artificielle peut être appliqué à la RA pour offrir aux utilisateurs des interactions améliorées avec leur environnement physique. L’algorithme d’IA peut être utilisé pour collecter davantage de données détaillées à l’aide de multiples capteurs complémentaires de la RA, tels que les gyroscopes et le GPS.

    En outre, l’IA peut être utilisée avec la RA pour offrir de meilleures expériences mobiles aux utilisateurs grâce à des applications interactives et attrayantes. L’intelligence artificielle permet aux utilisateurs de la RA d’interagir avec leur environnement physique et de manipuler des objets virtuels. En robotique, les applications d’IA peuvent être utilisées pour fournir une aide au contrôle intuitif et améliorer l’intention de mouvement des robots. De plus, lorsqu’elles sont combinées à la robotique, l’IA et la RA peuvent améliorer considérablement l’interaction homme-robot.

    En outre, l’IA peut être utilisée pour améliorer la reconnaissance vocale, le suivi des images et la détection des objets dans les smartphones. Dans l’ensemble, l’intelligence artificielle est cruciale si les développeurs cherchent à créer des cas d’utilisation plus convaincants pour la réalité augmentée.

    L’intelligence artificielle dans la RV

    Les experts en technologie pensent que les technologies d’intelligence artificielle joueront un rôle déterminant dans l’amélioration ou le développement des technologies de réalité virtuelle. Les industries qui peuvent bénéficier de cette incorporation sont les suivantes :

    La formation à la cybersécurité

    L’IA et la RV peuvent être fusionnées pour développer des programmes de formation axés sur l’IA pour les professionnels de la cybersécurité. L’intelligence artificielle déterminera les compétences de l’utilisateur, tandis que la RV peut être utilisée pour développer un programme de formation basé sur les résultats de l’IA.

    Formation militaire et hospitalière

    L’armée américaine peut utiliser l’IA et la RV pour la formation au combat et au pilotage d’avions. Les hôpitaux peuvent également tirer parti de cette technologie pour former les internes aux opérations chirurgicales.

    Parmi les autres aspects ou secteurs où l’IA peut être utilisée pour stimuler la technologie, les fonctionnalités et les capacités de la RV, citons l’analyse des données, l’accessibilité, l’immobilier et les soins médicaux. En outre, l’intelligence artificielle améliore la fonctionnalité et l’application de la RV dans une variété de domaines, y compris les jeux et la médecine.

    L’intelligence artificielle dans la RM

    La réalité mixte est utilisée pour combiner les mondes physique et numérique afin de créer non seulement des environnements uniques, mais aussi des expériences uniques pour les utilisateurs.

    L’IA, lorsqu’elle est utilisée avec la réalité mixte, peut enrichir la façon dont les machines apprennent à partir de données sans avoir besoin d’une programmation lourde, tirer parti des techniques d’apprentissage statistique pour prédire les attributs, et atteindre des capacités d’apprentissage progressif qui peuvent accueillir et analyser de nouvelles données.

    L’intelligence artificielle peut combler le fossé entre la simulation et la réalité. Grâce aux techniques et stratégies d’IA utilisées pour révolutionner l’ingénierie, les développeurs peuvent créer des images holographiques de haute qualité qui auront un bel aspect sur les écrans LCD.

    Outre l’ingénierie, l’IA et la RM peuvent être utilisées pour améliorer l’expérience des utilisateurs et accroître l’interaction dans des domaines tels que l’énergie et la fabrication.

    L’intelligence artificielle est un élément crucial qui renforce la puissance et les capacités des technologies émergentes. Elle peut transformer les industries et différents aspects de la société. Lorsqu’elle est intégrée à des technologies telles que la RA, la RV et la RM, l’intelligence artificielle peut créer des expériences plus riches et plus fascinantes pour nos mondes physique et numérique.

  • Le casque de réalité mixte Lynx R-1 sera disponible à 443 euros

    Le casque de réalité mixte Lynx R-1 sera disponible à 443 euros

    Pour ceux qui recherchent un casque de réalité mixte (RM) bon marché, le dispositif R-1 de la startup française Lynx est une perspective alléchante. Stan Larroque, fondateur de Lynx, développe le dispositif depuis plusieurs années maintenant, et fait un pas de plus vers la disponibilité pour le grand public avec le lancement d’une campagne de financement par la foule sur Kickstarter ce mois-ci. Il a également révélé le prix, 499 $ US (443 euros).

    Lynx R-1
    Lynx R-1

    Lors d’une nouvelle diffusion en direct cette semaine, Larroque a révélé de nombreux nouveaux détails sur les plans de l’entreprise et ce qu’elle tente d’accomplir. Bien qu’il se soit abstenu de dévoiler une date ou un objectif de financement pour le Kickstarter, il a déclaré que l’objectif actuel est de lancer la campagne d’ici la fin du mois de septembre, entre la troisième et la quatrième semaine. M. Larroque a également mis en avant plusieurs raisons de suivre cette voie particulière, visant à maintenir l’indépendance de Lynx par rapport aux grandes entreprises technologiques, aidant à mesurer les quantités commandées pour la production et contribuant ainsi à créer une livraison rapide pour les clients.

    Évidemment, la grande nouvelle tourne autour du prix. Lorsque le Lynx R-1 a été officiellement dévoilé au début de l’année 2020, il était commercialisé comme un casque d’entreprise vendu au détail pour 1500 $. Cela a radicalement changé, avec un prix descendant à 499 $. Maintenant, c’est un prix spécial Kickstarter pour encourager les bailleurs de fonds, avec une édition limitée transparente disponible pour 699 $ et une version pro-entreprise pour 899 $.

    Lynx n’a pas révélé quel sera le prix de détail final après le Kickstarter ou quelle sera la principale différence entre les modèles grand public et entreprise. Les spécifications du casque R-1 ont déjà été publiées, offrant un FOV de 90° avec une résolution de 1600 x 1600 par œil à 90Hz. Alimenté par la plateforme Qualcomm XR2 – la même que celle de l’Oculus Quest 2 et du HTC Vive Focus 3 – le dispositif ne sera pas fourni avec des contrôleurs car il utilisera le suivi de la main Ultraleap comme principale méthode de saisie. Cependant, le Lynx R-1 supportera les futurs contrôleurs FinchShift et Larroque a fait un commentaire à ce sujet : « explorer avec une autre société, plus grande, qui est célèbre pour la fabrication d’accessoires dans le monde du PC. »

    En ce qui concerne les jeux, il a confirmé que le Lynx R-1 sera compatible avec OpenXR au quatrième trimestre 2021 et que l’équipe a réussi à faire fonctionner le casque avec SteamVR. Un test précoce a montré Larroque dans la maison de SteamVR via un câble USB-C captif. À l’avenir, l’équipe prévoit d’activer le streaming WiFi 6 qui est intégré à l’appareil.

    Le Lynx R-1 promet certainement une alternative intéressante sur le marché du matériel XR et dès que d’autres détails seront révélés, Virtual-Guru vous le fera savoir.

  • Les designers explorent des moyens afin d’initier les utilisateurs à la réalité mixte

    Les designers explorent des moyens afin d’initier les utilisateurs à la réalité mixte

    Une vague d’artistes, de designers et d’universitaires est en train de brouiller les frontières entre réalité virtuelle, augmentée et physique.

    Designers et la réalité virtuelle
    Designers et la réalité virtuelle

    De nos jours, les surfaces de toutes sortes sont au premier plan, c’est pourquoi nous avons décidé d’en examiner tous les aspects, dans ces articles, d’A à Z. Pensant aux surfaces moins comme une catégorie de produits et plus comme un cadre, nous les utilisons comme une lentille pour comprendre l’environnement conçu. Les surfaces sont des sites d’innovation en matière de matériaux, des débouchés pour la technologie et la science, et des incarnations des normes en matière de santé et de durabilité, ainsi qu’un moyen pour les artistes et les chercheurs d’explorer les questions politiques.

    Anti Gone Pilotstills (1)
    Assis dans un jacuzzi vide et stylisé, portant un casque VR et des gants de capture de mouvement, les spectateurs du projet CLOUD+ Labs de Leah Wulfman ont navigué dans un modèle numérique 3D animé en nageant dans une grotte pendant que le logiciel passait au crible l’historique de recherche Google d’un utilisateur et le réinjectait aux moments clés du jeu. Le projet a été produit dans le cadre du programme Fiction et Divertissement du SCI-Arc, dirigé par Liam Young, le changeur de jeu de Metropolis 2020. À la Biennale d’architecture de Venise 2018, l’artiste Simone C. Niquille a critiqué l’ergonomie et les représentations numériques du corps à travers l’installation Safety Measures. Photo prise par Leah Wulfman

    « La réalité, aussi utopique soit-elle, est une chose dont les gens ressentent le besoin de prendre des vacances assez fréquentes », a écrit Aldous Huxley dans son roman dystopique de 1932, Brave New World, et ce sentiment est aigu près de 90 ans plus tard. La pandémie a intensifié et accéléré la dérive numérique, car la culture se tourne vers le virtuel ; vers Zoom, Animal Crossing ou TikTok pour trouver des moyens de s’échapper et de normaliser les conditions actuelles. Partir en vacances dans la réalité risque cependant de créer une opposition inutile entre les activités de notre vie quotidienne et nos interactions en ligne. La vérité est que nous opérons tous quelque part entre les deux et c’est dans ce juste milieu que plusieurs artistes, architectes et designers émergents jalonnent le territoire, utilisant cet espace non binaire pour aborder les questions de subjectivité et d’identité. La « réalité mixte » est le terme souvent utilisé pour décrire l’espace entre le réel et le virtuel, en particulier en relation avec la réalité augmentée (RA) et la réalité virtuelle (RV). 

    « J’aime trouver cette frontière entre réalité virtuelle, réalité augmentée et réalité physique, et essayer de faire un travail qui soit ambigu », dit Theo Triantafyllidis, qui a suivi une formation d’architecte en Grèce avant de partir à Los Angeles pour étudier le design et les arts médiatiques à UCLA. « Mon principal enseignement de l’architecture est de penser au corps humain en relation avec l’espace d’une manière primitive et archétypale. Les espaces virtuels des sites web et la réalité virtuelle ont une interaction incarnée, même s’il s’agit d’un curseur ou d’un écran tactile ».

    image : Une avant-garde de créateurs visionnaires utilise des environnements virtuels et de réalité augmentée pour subvertir les limites de l’espace physique et des corps. Pour Laida Aguirre, la directrice de stock-a-studio, cette investigation a pris la forme d’installations comme (un kit de ces quelques pièces), qui a été exposé à Materials & Applications à Los Angeles mais continue à vivre en ligne. Entre-temps, l’architecte et artiste Theo Triantafyllidis a produit des performances de réalité mixte comme Anti-Gone. Photo prise par Theo Triantafyllidis

    Son spectacle de réalité mixte Anti-Gone de 2020, par exemple, intègre des casques de RV, la technologie de capture de mouvement et un moteur de jeu fonctionnant en temps réel avec des acteurs, un public, et des décors et des costumes conçus par sa collaboratrice Polina Miliou. Équipés de lunettes VR et de capteurs de capture de mouvement, les acteurs se produisent sur scène tandis que leurs mouvements sont projetés sur des avatars dans la projection d’un monde virtuel. Le résultat fait s’effondrer les deux environnements théâtraux tout en doublant le nombre d’interprètes, puisque le public regarde les acteurs et les avatars simultanément.

    « Fuyant » est la façon dont l’artiste et designer Leah Wulfman catégorise l’interface entre les mondes, et le mot semble mieux rendre l’esthétique légèrement surréaliste que le plus simple « mixte ». Galo Cañizares, auteur de Digital Fabrications : Designer Stories for a Software-Based Planet, suggère que ses caractéristiques esthétiques comprennent des visuels défectueux, des environnements participatifs et des images méconnaissables. Il y a également de fortes doses de culture de mèmes et le vert vif utilisé pour la capture d’écran. « Le médium se prête à des thèmes et des questions non binaires », dit-il. « Vous pouvez non seulement concevoir un espace, mais aussi les corps et les avatars qui y entrent. Il nous permet de réfléchir à l’empathie et à la subjectivité dans la représentation ».

    En 2019, Laida Aguirre, professeur adjoint au Taubman College of Architecture and Urban Planning de l’Université du Michigan et directrice de stock-a-studio, a installé un kit de ces quelques pièces dans la vitrine de Materials & Applications (M&A), une galerie sur Sunset Boulevard à L.A. L’installation, qui consistait en un espace d’entraînement temporaire fait d’un « kit de pièces déployables », n’utilisait pas de matériel de RA ou de RV, mais était néanmoins conçue pour vivre de la même manière dans le monde réel et dans le monde virtuel. Aujourd’hui, après son exposition, un portail en ligne continue de répertorier les pièces qui peuvent être assemblées dans un équipement d’entraînement ad hoc, comme chez M&A, ou dans d’autres constructions IRL décorées d’autocollants imprimés avec le code de traitement ou de peaux fines affichant des images grattées sur Internet. « Il ne s’agit pas de créer d’autres mondes », expliquent-ils. « Plutôt un espace de l’étrange et du légèrement décalé. »

    Aguirre utilise ce travail pour remettre en question des hypothèses ancrées dans l’ADN de l’architecture. « L’architecture a toujours reposé sur des abstractions rhétoriques », disent-ils. « Les expériences à la première personne et les espaces survolés m’intéressent parce qu’ils mettent en avant des qualités scénographiques plutôt que de se concentrer sur l’expertise, sur les prouesses géométriques de la forme ». Ils utilisent l’analogie de la chambre d’un adolescent pour illustrer comment les réalités virtuelles et hybrides créent du sens. En plan, la pièce ressemble à quatre murs et une porte. Dans l’espace virtuel, elle est riche en décorations et en symboles. « Nous obtenons des indices sur le type d’espace dans lequel nous sommes grâce à ces objets. »

    Ven Safetymeasures 1
    Photo prise par Simone C. Niquille

    De nos jours, la majorité des gens vie dans un monde numérique plus que le monde réel. Les laboratoires CLOUD+ de Wulfman, créés comme projet de thèse en 2018 pour le programme Fiction et divertissement du SCI-Arc, ont mêlé une expérience de type spa à des résidus de données invisibles laissés sur Internet. Ils enseignent également au SCI-Arc et au Art Center, animant des cours et des ateliers qui mêlent l’IRL à des écrans verts, à la capture de mouvements et à des moteurs de jeu comme Unity, et voient des espaces hybrides et fuyants offrant la possibilité d’incarner une discipline qui inclut rarement des personnes, et encore moins des corps qui cherchent à défier les catégories conventionnelles. Le « gayming », terme de Wulfman, est une question d’identités et de récits pluriels.

    Par exemple, la designer Simone C. Niquille, basée à Amsterdam, a critiqué les mesures corporelles hétéronormatives de Jack, l’une des premières représentations humaines numériques développées à l’Université de Pennsylvanie, dans son œuvre intitulée Safety Measures (présentée au pavillon néerlandais de la Biennale d’architecture de Venise 2018). L’avatar virtuel et son homologue féminin, Jill, sont censés refléter un corps moyen afin de tester les espaces architecturaux, les plans d’étage ou les intérieurs de véhicules, mais ils incarnent les biais des bases de données de mesures corporelles. La politique de ces bases de données est cruciale pour comprendre « qui » Jack et Jill représentent », explique Niquille.

    « L’architecture ne peut même pas correspondre à la culture actuelle du jeu en termes d’expérience, d’engagement et d’inclusion », dit Wulfman, soulignant l’histoire de l’exclusion et le silence relatif du domaine sur des questions allant de #MeToo à Black Lives Matter. « Nos outils sont ouverts à la critique ».

  • Comment la réalité mixte peut aider votre petite entreprise ?

    Comment la réalité mixte peut aider votre petite entreprise ?

    La réalité mixte peut aider votre petite entreprise. La technologie de réalité mixte (RM) fusionne la vie réelle et la réalité virtuelle en temps réel. Comme la réalité virtuelle, la RM utilise des casques ou des écrans montés sur la tête (HMD) pour afficher des éléments virtuels en 3D. Mais contrairement à la RV, les simulations de réalité mixte donnent vie à des créations virtuelles dans un espace physique.

    Là où la RV est entièrement générée par ordinateur, la RM peut rendre des environnements et des visualisations où des objets réels et virtuels coexistent, comme en RA, mais aussi interagissent les uns avec les autres, contrairement à la réalité augmentée.

    Bien qu’elle soit plus courante dans les jeux vidéo et les films, la RM a de nombreuses applications dans différents secteurs. Le monde des affaires n’est que le dernier à exploiter son potentiel.

    La réalité mixte améliore la formation en entreprise

    Les petites entreprises peuvent utiliser la RM pour rendre la formation et l’évaluation des compétences immersives et interactives. Là où les nouveaux employés doivent lire des manuels et des protocoles de sécurité, la RM peut simuler une expérience pratique à la place.

    Grâce aux capacités de la RM, vous pouvez concevoir des scénarios de formation et guider vos employés dans des processus d’apprentissage complexes. Cela rend la formation plus rapide et plus facile. Elle élimine le risque que les nouvelles recrues mettent en danger vos opérations et vos biens. Et elle nécessite moins de personnel et de ressources.

    Les employés peuvent apprendre et améliorer leurs compétences professionnelles à tout moment et en tout lieu grâce à la MR. Le coaching à distance peut se faire en temps réel ou avec des modules de formation préenregistrés, par exemple.

    Utilisez la RM à cette fin pour renforcer les capacités de vos employés. Que vous optiez pour une formation en interne ou que vous fassiez appel à des experts du monde entier, la RM rend tout cela possible.

    La réalité mixte minimise les coûts opérationnels

    Les petites entreprises peuvent également utiliser la RM pour accroître l’efficacité de leurs opérations quotidiennes.

    La société de technologie Trimble, par exemple, a développé un casque de protection sur mesure avec HoloLens 2. Baptisé Trimble XR10, ce dispositif unique en son genre permet aux architectes, aux constructeurs et aux équipes d’accéder à des modèles 3D sur place et d’interagir avec eux.

    Réalité mixte dans les entreprise
    Réalité mixte dans les entreprises

    Les entreprises de construction peuvent certainement utiliser cette technologie pour collaborer en temps réel et éviter des erreurs et des retards coûteux dans les projets de construction.

    La réalité mixte vous permet de tester votre produit

    Le travail de construction est un domaine où la RM peut révolutionner les opérations commerciales standard. La RM peut être un atout essentiel dans toute entreprise, dans tout secteur d’activité.

    Par exemple, vous pouvez utiliser la RM pour créer et tester des produits avant de fabriquer vos prototypes.

    En outre, vous pouvez utiliser la RM pour fournir aux consommateurs des modèles en 3D et des visites de vos produits et services. Il s’agit en fait de la distribution d’échantillons, un moyen unique pour les clients de découvrir ce que vous avez à offrir. C’est un service unique que peu d’autres petites entreprises offrent.

    La réalité mixte est l’avenir

    De la formation à la vente en passant par le développement de projets, la réalité mixte est l’avenir inévitable. Avec la montée en puissance de la RM dans le secteur des entreprises, assurez-vous d’exploiter ses capacités avant que vos concurrents ne puissent l’atteindre en premier.

  • Conception de voitures Kia à réalité mixte par Varjo et Autodesk !

    Conception de voitures Kia à réalité mixte par Varjo et Autodesk !

    Le constructeur automobile sud-coréen, KIA Motors, utilise la société finlandaise de réalité mixte pour concevoir en Europe.

    Kia et réalité virtuelle
    Kia et réalité mixte

    Le fabricant finlandais de casques VR/XR Varjo fait les choses différemment. Ils sont apparus sur la scène avec le casque VR-1 en 2018, promettant une résolution de l’œil humain. Leur XR-1 peut passer de la réalité mixte à la réalité virtuelle.

    Le prix élevé des casques Varjo les limite essentiellement à l’industrie sérieuse, mais les cas d’utilisation vont sur la lune et vice-versa. Comme le XR-1 est pris en charge par la solution de conception Autodesk VRED, le casque de réalité mixte devient une solution encore plus précieuse pour les entreprises automobiles.

    Pour mieux comprendre cette relation, on s’est entretenu avec Urho Konttori, co-fondateur de Varjo et directeur des produits.

    Varjo et Autodesk

    « Quand Varjo n’avait qu’un an, nous visitions les bureaux d’Autodesk », a déclaré M. Konttori dans une interview vidéo. « C’est alors que nous avons vraiment posé les bases de ce partenariat. Nous avions déjà préparé la solution lorsque nous avons lancé notre premier produit ».

    Varjo travaille avec Autodesk depuis lors. La société a joué un rôle déterminant dans le positionnement précoce de Varjo en tant que fournisseur de RV industrielle et de réalité mixte.

    « C’est l’adéquation parfaite entre deux technologies », a déclaré Lukas Fäth, chef de produit VRED chez Autodesk, dans un communiqué partagé. « Avec la plus grande précision de VRED en matière de qualité de conception et le photoréalisme du Varjo XR-1, les concepteurs peuvent repérer les problèmes et faire des itérations plus tôt que jamais ».

    Relations

    Varjo a des relations similaires avec un certain nombre de sociétés dans des secteurs verticaux adjacents.

    « Nous sommes un groupe de collaboration, nous ne construisons pas les solutions nous-mêmes, nous sommes un fabricant de matériel. Nous travaillons avec tous nos partenaires et nous nous engageons avec eux presque au quotidien », a déclaré M. Konttori. « Nous essayons toujours d’apprendre le plus possible ».

    Il existe un certain nombre de cas d’utilisation potentiels qui pourraient être la démonstration de ce partenariat. Cependant, celui du constructeur automobile sud-coréen KIA Motors est particulièrement illustratif.

    Design automobile et réalité mixte

    Gregory Guillaume - Vice President of Design at KIA Motors Europe - mixed reality car design

    La conception automobile est un processus long et compliqué, même avec une réalité mixte. Sans cela, elle consiste à la fois en une planification et une collaboration bidimensionnelles et en un art et une modélisation tridimensionnels avec des réunions en personne. KIA est basée en Corée mais l’un de ses principaux centres de design se trouve en Europe.

    L’année dernière, à la même époque, la finalisation des dessins d’une automobile pouvait nécessiter de multiples visites en personne de cadres de différents continents. Ces visites de plusieurs jours, pour des raisons de coût et d’efficacité, pourraient être programmées tous les deux mois. Une mise à jour du système était déjà prévue.

    VRED

    « Parce que VRED a une grande capacité de collaboration, les cadres de KIA peuvent organiser ces réunions en quelques heures au lieu de plusieurs jours », a déclaré M. Kontorri.

    Alors que la plus grande collaboration possible se faisait déjà à distance pour gagner du temps et réduire les coûts, certains aspects du processus de conception n’avaient pas d’alternative viable.

    « Bien que vous puissiez utiliser le clavier, la souris et l’écran pour travailler efficacement en 2D, vous n’aurez jamais une impression totalement réaliste de la voiture », a déclaré Frank Hübbe, directeur du CAS du Centre de design européen de KIA, dans le communiqué.

    Cependant, une société aussi internationale que KIA a dû rapidement repenser ce genre de choses avec l’arrivée de la pandémie de coronavirus au cours de l’hiver et du printemps de cette année. La collaboration à distance allait entrer dans des aspects du processus de conception qui étaient auparavant sacrés pour le monde physique grâce à des solutions de réalité mixte.

    « La technologie nous rassemble à un moment où nous ne pouvons pas être présents dans le même espace physique », a déclaré Gregory Guillaume, vice-président du design du Centre européen de design de KIA, dans le communiqué.

    Le cas d’utilisation de KIA

    « Pour la première fois, nous pouvions littéralement voir les écailles métalliques dans la peinture et percevoir la profondeur et la qualité des nuances de la matière. Nous pouvions voir la beauté des détails plus que jamais dans le monde virtuel », a déclaré Thomas Unterluggauer, directeur de la création du centre de design européen de KIA Motors, dans le communiqué.

    Les concepteurs de KIA peuvent créer, partager et modifier des modèles virtuels d’automobiles à des stades avancés du processus de conception. Cependant, il est possible d’éditer le modèle physique classique en argile de l’automobile virtuellement en collaboration à distance en temps réel grâce à la réalité mixte.

    « Il est fascinant de voir à quelle vitesse on s’adapte à la réalité mixte. On se laisse entraîner à penser un instant que la réalité est fausse, qu’il manque quelque chose », a déclaré M. Unterluggauer. « C’est complètement différent de toutes les autres expériences que j’ai eues en RV. »

    Dans l’entreprise depuis le début

    La dernière fois qu’on a parlé à Varjo, c’était pour rencontrer leur nouveau PDG, Timo Toikkanen. À l’époque, Toikkanen a dit quelque chose qui semble au moins aussi pertinent aujourd’hui : « Les entreprises ont délaissé les autres facettes de l’XR pour se tourner vers l’entreprise en particulier et Varjo profite du fait que nous n’avons pas de travail de pivot à faire, nous sommes dans l’entreprise depuis le début. »

    La réalité mixte rattrape la réalité réelle depuis des années. Ce cas d’utilisation est un exemple de changement pour le mieux, pris comme une mesure drastique, qui ne sera probablement pas mise à côté lorsque la « normale » reviendra.

  • Comment la 5G pourrait rendre la réalité augmentée et la réalité mixte plus réelles ?

    Comment la 5G pourrait rendre la réalité augmentée et la réalité mixte plus réelles ?

    On pourrait penser qu’une technologie qui nous permet soit de nous échapper soit d’améliorer notre vision de la réalité connaîtrait une énorme poussée de popularité en ces temps de folie. Il s’agit de la 5G.

    5G
    5G

    Mais la vérité est que, bien qu’il y ait certainement eu des améliorations dans la vente d’appareils, d’applications et de services offrant la réalité virtuelle (RV), la réalité augmentée (RA) ou la combinaison appelée réalité mixte (RM), ils restent un marché de niche.

    Une partie du problème est que la technologie qui alimente ces dispositifs d’affichage montés sur la tête est encore coûteuse. Les produits doivent également être perfectionnés pour atteindre le type d’effet de surprise que beaucoup de gens attendent. Enfin, beaucoup d’entre eux sont relativement grands et deviennent inconfortables à porter, ne serait-ce que pour de courtes périodes.

    Heureusement, un certain nombre d’initiatives importantes et de nouvelles technologies commencent à se mettre en place pour permettre la mise au point du type d’appareils légers mais toujours aussi performants que la plupart des observateurs de l’industrie estiment nécessaires pour que les produits AR/VR/MR se généralisent. Il n’est pas surprenant que l’un d’entre eux soit la 5G.

    Un homme portant un casque de réalitée augmentée (Getty Images)

    L’évolution de l’affichage

    Le défi fondamental du concept de casque AR/VR/MR est que la plupart des gens ne sont prêts à porter sur leur visage qu’un objet de la taille et du poids de lunettes de soleil ou de lunettes de prescription normales. Malheureusement, il n’est pas possible pour l’instant d’adapter à cette taille les technologies informatiques, graphiques et d’affichage nécessaires pour créer une expérience virtuelle ou de réalité augmentée de haute qualité.

    Par conséquent, nous commençons à voir un certain nombre d’entreprises expérimenter des conceptions qui séparent les éléments informatiques de l’écran de verre monté sur la tête. En général, ces conceptions utilisent un smartphone et une connexion câblée aux lunettes pour fournir une expérience complète.

    Récemment, la rumeur disait qu’Apple travaille sur un appareil de ce type, potentiellement avec une connexion sans fil entre un iPhone et un écran de type lunettes. La plupart des observateurs d’Apple pensent cependant que « Apple Glass » est plus une fiction qu’une réalité, et qu’il faudra encore plusieurs années pour le réaliser, même s’il s’agit d’une réalité.

    Quoi de neuf dans la RA ? 5G

    Lors du salon Augmented World Expo, le fabricant de puces pour smartphones et réseaux 5G Qualcomm, en collaboration avec un certain nombre de fabricants de smartphones et de fournisseurs de télécommunications du monde entier, a annoncé plusieurs nouvelles options intéressantes avec ce type de conception en deux parties qui devraient être lancées cette année.

    Baptisés XR Viewers, ces écrans montés sur la tête de compagnies comme NReal, Panasonic, Pico et Oppo se connectent via un câble USB-C à certains smartphones 5G Qualcomm Snapdragon 855 ou 865 de fournisseurs tels que OnePlus, Oppo, Asus et d’autres.

    Qualcomm a également discuté des détails de son programme XR optimisé, qui garantit que tous les différents visionneurs XR et les smartphones compatibles suivront les mêmes spécifications techniques essentielles et les mêmes normes logicielles afin de garantir qu’ils puissent travailler ensemble en toute transparence.

    Une partie essentielle du fonctionnement de ces appareils est une connexion 5G, et c’est là que les opérateurs, comme Verizon aux États-Unis, entrent en jeu. Afin d’obtenir une qualité d’image très réaliste, ainsi que des informations spécifiques à un lieu, ces visionneuses XR et les smartphones qui les accompagnent s’appuient également sur une connexion informatique en Cloud.

    En utilisant la connexion 5G rapide et à faible latence (c’est-à-dire avec un temps de latence extrêmement court), les applications fonctionnant sur les visionneuses peuvent obtenir des images à résolution encore plus élevée à partir du Cloud. Cela peut rendre l’expérience d’utilisation de ces écrans montés sur la tête encore plus convaincante et présente l’avantage supplémentaire d’intégrer des détails spécifiques au lieu.

    Casques et 5G

    Microsoft a annoncé qu’il ajouterait des capacités 5G à son casque HoloLens 2 MR, plus orienté vers les entreprises, d’ici cet automne, par le biais d’un module d’extension. Contrairement aux visionneuses XR, l’HoloLens 2 intègre tous les éléments informatiques à l’intérieur du casque, mais le résultat est un appareil plus lourd et plus coûteux.

    Comme les XR Viewer, l’HoloLens 2 tirera parti de la connexion 5G pour donner accès aux ressources de l’informatique en Cloud (dans ce cas, de Microsoft Azure). Microsoft utilise un concept appelé « ancres spatiales » pour faire des choses comme permettre à plusieurs personnes portant l’HoloLens d’interagir avec les mêmes objets virtuels. Ces possibilités d’interaction, et d’autres, expliquent la valeur des connexions 5G.

    Bien entendu, tous les casques AR/VR/MR n’utilisent pas une connexion 5G. Le populaire Oculus Quest, par exemple, qui est également un appareil intégré et autonome, n’utilise que le WiFi et il est conçu principalement pour une utilisation en intérieur. De même, le nouveau Reverb G2 de HP, qui offre la plus haute résolution de tous les casques RV, se branche sur les PC et n’utilise que des connexions Wi-Fi.

    Cependant, lorsque nous regardons vers l’avenir, nous nous attendons à pouvoir utiliser la réalité augmentée ou mixte partout où nous allons. Outre les exemples les plus connus de la possibilité d’en apprendre davantage sur des objets ou des lieux du monde réel simplement en les regardant (ou peut-être en se faisant rappeler le nom d’une personne par un minuscule haut-parleur ou par des écouteurs connectés en la regardant), la RA et la RM promettent de nous donner de nouvelles façons d’apprendre comment les choses fonctionnent, de jouer à des jeux plus interactifs, et bien plus encore.

    Dans ce type de scénario et dans d’autres, les avantages d’une liaison 5G toujours connectée commencent à apparaître très clairement.