Lorsqu’il s’agit de privilégier les technologies de réalité virtuelle (RV) et de réalité augmentée (RA), le PDG d’Apple, Tim Cook, n’a cessé de faire connaître sa position : la RA est très certainement l’avenir. Cook était à Dublin, en Irlande, cette semaine, pour recevoir un prix de reconnaissance spécial pour les contributions de la société au pays, 6 000 personnes travaillent dans son bureau de Cork et il a discuté de l’avenir de la technologie et du rôle de la RA réalité augmentée.
Photo du CEO d’Apple Tim Cook
Au
cours d’une séance présidée par Martin Shanahan, PDG d’IDA Ireland, il a
interrogé M. Cook sur ses attentes pour les cinq à dix prochaines années :
« Je suis enthousiaste à propos de la RA. Je pense que c’est le prochain
grand projet, et qu’il va imprégner toute notre vie », rapporte Silicon
Republic.
Alors qu’Apple n’a pas encore pénétré le marché des casques de la RA pour concurrencer l’HoloLens 2 de Microsoft, la société a fait de grandes percées dans le domaine des logiciels grâce au lancement d’ARKit en 2017, qui en est maintenant à sa troisième itération. Cela a aidé les développeurs à créer une large gamme d’applications et de jeux vidéo pour les appareils iOS. Outre le divertissement, Cooks voit de nombreuses applications utiles de la RA pour les utilisateurs à domicile : « Vous êtes peut-être sous la voiture en train de changer l’huile, et vous ne savez pas exactement comment faire. Vous pouvez utiliser la RA », mentionne-t-il.
Il
semble également faire un subtil clin d’œil à son aversion pour la RV et aux
raisons pour lesquelles la RA est sa technologie de prédilection : « Je
pense que c’est quelque chose qui n’isole pas les gens. Nous pouvons l’utiliser
pour améliorer notre discussion, pas pour la substituer à la connexion humaine,
ce qui m’a toujours profondément inquiété dans certaines autres
technologies ».
Lors
de sa visite en Irlande, Cook a réussi à rencontrer le développeur War Ducks,
basé à Dublin, l’équipe à l’origine de titres de RV comme Sneaky Bears et
RollerCoaster Legends II : Thor’s Hammer. L’année dernière, la société a
annoncé un investissement de 3,8 millions de dollars US qui allait servir à une
expérience de RV basée sur la localisation.
« Hier,
j’ai rendu visite à une société de développement appelée War Ducks … à
Dublin, il y avait 15 personnes et ils recrutent du personnel et utilisent la
RA pour les jeux », a mentionné Cook. “Vous pouvez imaginer, pour les jeux,
c’est incroyable, mais même pour notre discussion ici. Vous et moi pourrions
parler d’un article et en utilisant la RA, nous pouvons le faire apparaître et
nous pouvons regarder la même chose en même temps.”
Grâce à une nouvelle application de simulation clinique développée par une équipe à l’échelle du campus de la Yale School of Nursing, un code QR peut être placé sur un mannequin de RCP et ensuite présenté comme une blessure ou une lésion à partir d’une bibliothèque d’options.
Photo d’une Infirmière
En
collaboration avec des partenaires de l’ensemble du campus, Travis McCann,
étudiante en soins de courte durée à la Yale School of Nursing (YSN), poursuit
deux projets visant à aider les fournisseurs à devenir de meilleurs cliniciens.
Son équipe a développé une application pour les hallucinations visuelles et
auditives qui permet aux participants de mieux apprécier les défis auxquels ces
patients font face. Ils travaillent également sur une application de simulation
clinique qui combine un casque de réalité augmentée (RA) avec des codes QR
imprimés sur papier et des mannequins RCR pour faciliter la formation clinique
portable et peu coûteuse.
L’application sur les hallucinations encourage les étudiants à explorer au-delà de la théorie des manuels. Par exemple, tel que présenté sur un casque de réalité augmentée, l’application pourrait montrer un lézard qui fait le tour de la pièce à bicyclette en grinçant pendant un scénario d’entrevue d’emploi. Cela permet au prestataire de soins de mieux comprendre à quel point il est distrayant et désorientant pour les patients d’appliquer des techniques de pensée critique dans ces conditions.
« C’est
une façon d’amener les fournisseurs à être plus empathiques », a dit M.
McCann. « Et vous obtenez de meilleurs résultats avec un plan de traitement
avec plus d’empathie. » Travis Mccann.
Le
coéquipier de McCann, Joe Albertario ’20 M.S.N., un étudiant dans la spécialité
de la santé mentale et psychiatrique, est d’accord. « On obtient de
meilleurs résultats pour le patient lorsque le fournisseur a une plus grande
empathie », a déclaré M. Albertario. « Le temps passé avec le patient
augmente, l’intervenant peut imaginer ce que le patient vit et la liste des
diagnostics différentiels s’allonge. Cela signifie que j’ai plus de chances
d’identifier le cas correctement. Tout cela conduit à ce que Yale produise de
meilleures infirmières, avec une meilleure compréhension, et une meilleure
santé. »
Dans
l’application de simulation clinique, un code QR est placé sur un mannequin de
simulation ou sur le corps d’un instructeur et le système AR affiche le code
comme une blessure ou une lésion à partir d’une bibliothèque d’options. Les
étudiants répondent alors pour évaluer le problème et fournir un traitement.
Les instructeurs peuvent réinitialiser l’exercice pour une nouvelle classe ou
une spécialité différente en quelques minutes seulement.
Forger des partenariats à travers Yale et au-delà
Pour
acquérir l’expertise dont il avait besoin pour créer les applications, McCann a
demandé conseil au Center for Creative Arts at Media (CCAM) de Yale, où il a
pris contact avec Bobby Berry ’19, étudiant de premier cycle, qui est
maintenant le principal développeur des applications.
« Je
crois vraiment que c’est grâce à la venue de Travis au CCAM que le projet a pu
démarrer « , a déclaré Berry. » De plus, la réalité mixte est
privilégiée avec le parrainage et l’intérêt des entreprises, ce qui nous aide à
acquérir la technologie et nous donne l’occasion de parler de nos idées avec
les professionnels de l’industrie. »
McCann
décrit avec enthousiasme les contributions du centre au succès de son projet.
La CCAM demande : « Quelle est votre idée ? Comment pouvons-nous vous aider
? », dit-il, soulignant que le CCAM guide les étudiants vers leurs
objectifs sans prendre en charge les projets. Plutôt que de se contenter de
recréer un exercice existant avec une réalité mixte, M. McCann voulait explorer
de nouvelles possibilités. « Quelles choses ne pouvions-nous pas faire
avant que cette technologie nous permette maintenant de le faire ? » a dit
McCann.
Les
doubles projets de l’équipe apportent des améliorations considérables par
rapport à la technologie existante. L’une des forces de l’application est sa
capacité à démontrer les hallucinations visuelles. Et les codes QR de
l’application de simulation clinique permettent d’éviter les heures
d’application de maquillage et de répétition de l’exercice pour les nouveaux
étudiants ou les nouvelles classes. Les plaies peuvent être mappées sur une
zone, puis modifiées facilement, créant ainsi des scénarios entièrement
nouveaux mieux adaptés à chaque spécialité infirmière.
L’exploration
de nouveaux territoires et la mise à profit des compétences uniques de l’équipe
ont clairement trouvé un écho chez Berry. « Je pense que le projet de
simulation de soins infirmiers est particulièrement excitant parce qu’il tente
vraiment de créer une nouvelle forme d’éducation pratique », a-t-il
déclaré. « L’un des plus grands nouveaux potentiels de la réalité augmentée/réalité
virtuelle (RA/RV) est sa fonction d’outil de formation. La recherche a montré
qu’elle est efficace pour développer certaines habiletés motrices ainsi que des
habiletés d’observation, donc notre projet est vraiment une combinaison
parfaite », a déclaré M. Berry.
Berry
est maintenant le boursier en innovation de la CCAM et de Tsai CITY (Center for
Innovative Thinking à Yale), et son travail d’équipe avec McCann se poursuit.
Kits abordables et portables
« Tout
le monde n’a pas accès à Yale Sim », a déclaré M. McCann, et cela vaut pour
l’équipement coûteux des espaces de simulation de pointe de YSN. Par exemple,
un mannequin grandeur nature, haute fidélité, capable de respirer, de saigner
et de parler coûte plus de 100 000 $ et un casque de haute technologie pour la
RA se vend à environ 3 000 $. Mais la technologie mixte que McCann, Albertario
et Berry sont en train de mettre au point est portable et beaucoup plus
abordable.
Une petite trousse comprenant un mannequin de RCR thoracique pour quelques centaines de dollars, un simple casque de RV qui remplace le casque de haute technologie à moins de 10 $ et un téléphone intelligent d’occasion sont tout ce dont vous avez vraiment besoin. L’équipement se range dans un sac à dos et peut être rangé dans le compartiment supérieur d’un avion.
« Travis,
Joe et Bobby ont fait un travail formidable en se connectant aux ressources de
tout Yale, et c’est le type d’innovation axée sur la solution qui peut résulter
de ces partenariats. » Dean Ann Kurth.
« Travis
a fait une démonstration de sa simulation de réalité mixte à notre conseil de
direction du doyen plus tôt cette année, et la salle a été stupéfaite par
toutes les possibilités « , a déclaré Dean Ann Kurth, M.S.N., Ph.D.,
C.N.M., M.P.H., F.A.A.N. » Cette application de la réalité mixte touche
toutes les spécialités et peut rendre accessibles même les communautés les plus
éloignées pour améliorer la formation et les soins cliniques. La capacité de
fournir de l’équipement portable et peu coûteux permettra aux fournisseurs de
maîtriser divers scénarios de patients, ce qui mènera à une meilleure
prestation des soins de santé. Travis, Joe et Bobby ont fait un excellent
travail de connexion avec les ressources de tout Yale, et c’est le type
d’innovation axée sur les solutions qui peut résulter de ces
partenariats ».
La suite
L’équipe
explore les possibilités avec des experts de la Yale School of Medicine et de
la Yale School of Management et étudie la meilleure façon de mesurer l’empathie
chez les fournisseurs avant et après l’utilisation de l’application.
« Une
fois que les données seront recueillies et que nos preuves montreront que la
formation virtuelle améliore les résultats, la création de nouvelles
simulations en réalité virtuelle pour toutes les compétences infirmières
pourrait révolutionner la formation en soins de santé et améliorer grandement
la qualité des soins aux patients », a déclaré M. Albertario.
Facebook ajoute de nouveaux jeux de réalité augmentée à son application dédiée aux conversations Messenger. Six personnes peuvent jouer aux jeux à la fois via les conversations vidéo, notamment le jeu « Don’t Smile » et « Asteroids Attack. »
Facebook Messenger AR
Ce mercredi passé, le grand réseau social a annoncé via son blog qu’il a ajouté à son application Messenger des jeux de réalité augmentée (AR) auxquels les utilisateurs pouvaient jouer en multijoueur avec leurs amis.
Les jeux utilisent la technologie AR (réalité augmentée) afin de suivre les visages des joueurs et les mettre dans des défis multijoueur face à face. Un de ces jeux est, Asteroids Attack, les joueurs doivent naviguer dans un vaisseau spatial autour des astéroïdes. Un autre jeu baptisé « Don’t Smile » qui signifie ne ris pas, fais ce que le jeu t’annonce, et celui qui sourit en premier perd. Ce jeu est similaire à l’application AR « Try Not to Smile » qui est disponible sur iOS.
Ces jeux sont des premiers de la part de Facebook, mais le réseau social continue de faire progresser la réalité augmentée en expérimentant de nouveaux formats et expériences pour ses utilisateurs, ces expériences pouvant être des futures sources de revenus. Instagram, qui appartient à Facebook, a récemment lancé une série de filtres AR qui permettent aux utilisateurs d’essayer des nuances de rouge à lèvres de la société Kylie Jenner.
Les jeux Messenger peuvent être joués avec un maximum de six personnes et il y a d’autres qui sont en cours de développement, comme « Beach Bump » et « Kitten Krazy ».
Voici les instructions de Nora Micheva, chef de produit à Facebook Messenger, sur la façon de jouer aux jeux : « Assurez-vous d’avoir la dernière version de Facebook Messenger. Ouvrez une conversation existante ou trouvez la personne ou le groupe de personnes avec lequel vous souhaitez discuter dans le coin supérieur droit de l’écran, appuyez simplement sur le bouton étoile et sélectionnez l’un des jeux AR, la personne ou le groupe avec lequel vous discutez recevra une notification indiquant qu’il est temps de lancer le jeu. »
Voici comment installer la dernière mise à jour de Facebook Messenger (pour les débutants) :
Si vous êtes un utilisateur Android, allez sur Google Play Store, cliquez sur la barre de recherche et tapez “Facebook Messenger”, maintenant cliquez sur l’application Facebook Messenger puis sur mettre à jour.
Si vous êtes un utilisateur IOS, allez sur l’App Store, cliquez sur la barre de recherche et tapez “Facebook Messenger”, maintenant cliquez sur l’application Facebook Messenger puis sur mettre à jour.
Il est à noter que les utilisateurs IOS devraient avoir la dernière version d’IOS afin de pouvoir installer la dernière mise à jour de Facebook Messenger.