Le chef du matériel d’Apple se lance dans un nouveau projet. Serait-ce le nouveau casque VR ou AR tant attendu ?
nouveau casque VR Apple concept
Depuis sa fondation en 1976, Apple s’est efforcé de rendre l’informatique plus personnelle. Ces dernières années, le passage de l’iPhone à l’AirPod a concrétisé cette vision.
Pour beaucoup, la prochaine étape logique était les lunettes de réalité augmentée (RA)… comme le Google Glass mais bien moins nul.
Selon un récent rapport Bloomberg, Apple prévoit de sortir un casque de réalité virtuelle (RV) comme pont vers la RA.
Le nouveau casque VR n’est pas destiné au grand public
Les initiés d’Apple pensent que le produit coûtera beaucoup plus que les 300 à 900 euros que coûtent les casques de RV commerciaux (par exemple, Oculus, Pico, Sony).
Afin de tirer parti des puces et de la technologie d’affichage les plus avancées de l’entreprise, le casque VR d’Apple pourrait coûter jusqu’à 6 000 euros pour un Mac Pro.
Selon Bloomberg, Apple pourrait ne commercialiser qu’environ 180 000 unités par an en 2023, ce qui est loin des dizaines de millions de produits qu’elle commercialise habituellement.
Pour réduire le poids, Apple prévoit d’utiliser un extérieur en tissu qui est légèrement différent de la nappe de métal que vous tenez probablement dans votre main en lisant ceci.
Avec un casque VR sur le marché, le vaisseau spatial Cupertino peut perfectionner la technologie, amener des développeurs à bord et créer un pipeline de contenu.
L’acquisition par Apple de NextVR, une startup qui enregistre des concerts et des événements sportifs pour la RV a été un fil d’Ariane tangible.
Apple a annoncé que son chef du matériel, Dan Riccio, assurera la transition et prendra en charge un projet non spécifié.
Selon les rumeurs, il y a au moins trois possibilités pour cette mystérieuse entreprise :
VR/AR : Évidemment.
Voiture : Le projet de voiture automatique d’Apple a pris de l’ampleur, mais il est déjà sous la direction du chef de l’IA de la société, John Giannandrea.
Déclassement du titre : Le nouveau titre de Riccio (vice-président de l’ingénierie) est un déclassement, donc le vétéran de 23 ans pourrait bien prendre du « recul ».
Quoi que Riccio finisse par faire, nous savons déjà que le produit AR/VR d’Apple sera énorme et que le cycle du produit se déroulera de la même manière.
Pour combien de choses ferez-vous demi-tour et rentrez-vous chez vous lorsque vous vous rendrez compte que vous l’avez oublié ? Votre déjeuner ? Vous pouvez simplement acheter quelque chose à la cafétéria. Une veste ? peut-être, selon l’heure à laquelle vous arrivez. Votre téléphone portable ? Le frein à main tourne, et on rentre tous en courant. Même si cela signifie que nous serons probablement en retard pour une réunion importante. C’est quelque chose dont on ne peut pas se passer.
Photo du casque VR HTC Vive avec autocollant Apple
Apple, l’un des principaux géants technologiques du monde, va encore plus loin avec un autre développement qui va s’imbriquer dans nos identités mêmes.
Leurs nouvelles lunettes intelligentes, deux modèles différents appelés N301 et N421, rapprocheront les humains des cyborgs comme jamais auparavant.
Le mot « cyborg » abréviation de « organisme cybernétique » a été inventé en 1960 par Manfred E Clynes et Nathan S Kline, et décrit bien la tendance mondiale selon laquelle les humains ne font plus qu’un avec la technologie.
Le N301, un casque utilisant une combinaison de réalité augmentée et de réalité virtuelle, « sera doté d’écrans à ultra-haute résolution qui rendront presque impossible pour un utilisateur de différencier le monde virtuel du monde réel. Un système de haut-parleurs cinématographiques rendra l’expérience encore plus réaliste, affirment les personnes qui ont utilisé des prototypes », a déclaré Tim Cook, PDG d’Apple, selon le BGR. Le N301 devrait être commercialisé en 2022.
En revanche, le N421 n’utilisera que la réalité augmentée. Il s’agira d’une paire de lunettes qui fera office de téléphone portable, présentant devant vos yeux des messages, des cartes, des rappels et une foule d’autres informations. Toutefois, ces lunettes intelligentes ne devraient être commercialisées qu’en 2023.
Apple est peut-être à la recherche d’une nouvelle technologie qui pourrait transformer n’importe quelle surface en écran tactile. Ces contrôles virtuels ont été détaillés dans une récente demande de brevet.
Lunettes de réalité augmentée
La demande de brevet, déposée en 2016 et rendue publique cette semaine, décrit une manière d’afficher un écran tactile sur un objet. Cette interface ne serait visible que par la personne qui porte un appareil de réalité augmentée et non par les personnes qui l’entourent.
Apple explique que ce type d’interface serait nécessaire à mesure que les écrans de réalité augmentée deviennent de plus en plus petits. Avec ces petits écrans, il est presque impossible d’interagir avec eux comme avec un écran tactile. Par exemple, vous pouvez visualiser du contenu sur vos lunettes Apple, mais il serait peu pratique d’enlever vos lunettes de réalité augmentée et de commencer à taper sur leurs écrans.
« La tendance actuelle est que les écrans de RA deviennent plus petits et/ou se rapprochent de la rétine de l’œil de l’utilisateur », poursuit-elle. « C’est par exemple le cas des écrans montés sur la tête et cela rend l’utilisation des écrans tactiles difficile, voire impossible ». Déclare Apple dans sa demande de brevet.
En conséquence, les fabricants de matériel informatique doivent mettre au point une nouvelle méthode d’interaction avec ces dispositifs de RA. La solution d’Apple consiste à projeter l’interface sur un objet dans votre environnement. Vous pourriez alors taper ou toucher ces commandes comme vous le feriez sur un clavier ou un dispositif à écran tactile.
Dans une solution, Apple exigerait que l’utilisateur porte un dispositif tactile sur ses doigts. Dans une autre solution, les lunettes utiliseraient une caméra pour suivre les doigts d’une personne lorsqu’elle bouge. Pour déterminer si un bouton virtuel a été pressé, la technologie pourrait utiliser la chaleur pour surveiller les changements de température de l’objet qui est pressé. Plus la pression est longue, plus l’objet devient chaud.
Cette demande de brevet contient une technologie passionnante, mais elle montre aussi qu’Apple pense à la réalité augmentée depuis plus longtemps que nous ne le pensons. Cette recherche devrait aboutir à une paire de lunettes intelligentes et éventuellement à un casque de réalité virtuelle. Selon des rumeurs récentes, la société pourrait lancer ses lunettes intelligentes de réalité augmentée dans les deux prochaines années.
Apple a passé des années à travailler sur des produits portables et prévoit de lancer un ensemble de lunettes intelligentes de réalité augmentée et un casque avec des capacités de réalité virtuelle et de réalité augmentée, selon un nouveau rapport de Bloomberg. Les deux seront contrôlés par l’assistant vocal Siri d’Apple, mais des discussions sur la conception ont retardé leur sortie de quelques années supplémentaires.
Photo du casque VR HTC Vive avec autocollant Apple
LENTILLE FUTURE
L’équipe de RA et de RV d’Apple, dirigée par Mike Rockwell, s’est agrandie d’environ 1 000 personnes, selon le rapport. L’unité travaille sur un ensemble de lunettes intelligentes avec des capacités de RA appelé N421 et un casque complet de RV appelé N301. Bien que Rockwell fonctionne soi-disant avec une certaine indépendance par rapport à la hiérarchie centrale d’Apple, une grosse bagarre sur le design du N301 a repoussé son apparition dans les magasins. Le casque a été conçu comme étant plus avancé et plus puissant que tous les appareils existants, mais pour atteindre ce niveau sans surchauffer ou alourdir l’utilisateur, il faudrait un hub fixe connecté sans fil à l’appareil. Le casque VR pouvait être autonome, mais avec des fonctionnalités réduites.
L’ancien chef du design, Jony Ive, pensait que le fait d’avoir un hub était une erreur maladroite et que le casque ne devait être qu’aussi puissant que la technologie qu’il contenait. Il préférait également l’approche des lunettes intelligentes qui consiste à superposer la réalité avec plus d’informations plutôt que de l’occulter complètement. Comme le PDG d’Apple, Tim Cook, a choisi d’être d’accord avec Ive, le casque a dû revenir aux concepteurs. Le casque, tel qu’il est décrit dans le rapport, a cependant toujours l’air assez robuste. Il comprend un système sonore avancé et des écrans d’une résolution suffisamment élevée pour que l’œil ne reconnaisse même pas qu’il voit un écran. Ce casque est également en tissu et ressemble beaucoup à l’Oculus Quest de Facebook. Le casque utilisera son propre App Store d’Apple avec des jeux, des flux vidéo et des programmes de réunions virtuelles.
Il n’y a pas beaucoup de détails dans le rapport sur les lunettes intelligentes, sauf qu’elles sont plus complexes que le casque VR. Selon Jon Prosser, un habitué des actualités d’Apple, le N421 s’appellera « lunettes Apple » et coûtera environ €. Le coût de ces deux produits est encore indéterminé, selon le rapport Bloomberg. Si Prosser a raison et si les lunettes Apple sont les mêmes que le N421, les lunettes relieront un iPhone à l’écran holographique des deux lentilles et comporteront des commandes gestuelles. Il y a encore beaucoup d’inconnues, même si les rapports ne se contredisent pas. À un moment donné, il a été suggéré que les lentilles ne seraient rien d’autre que des écrans holographiques, sur la base d’un brevet accordé à Apple l’année dernière pour un matériau semblable au verre, capable de passer du transparent à l’opaque et décrit comme utile pour la réalité augmentée.
LES OBJETS À PORTER
Beaucoup de ces détails peuvent finir par changer avant qu’un client ne les mette réellement en place. Le casque sera annoncé l’année prochaine pour une sortie en 2022, tandis que les lunettes intelligentes ne seront pas sorties avant au moins 2023, selon le rapport. Prosser avait prédit que les lunettes Apple sortiraient à l’automne 2021 au plus tôt, mais Bloomberg avance beaucoup ce délai. M. Prosser a également cité la crise manufacturière précipitée par la pandémie COVID-19 comme raison de ce retard, ce qui pourrait être vrai au même moment.
Si Bloomberg et Prosser ont tous deux raison, les lunettes intelligentes auront Siri avec le contrôle des gestes, tandis que le casque VR sera livré avec une télécommande. Apple améliore continuellement les capacités de Siri, mais il se peut qu’elle prévoie une mise à niveau importante en utilisant la technologie d’Inductiv et d’autres startups d’IA qu’elle a récemment acquises. Apple aura besoin de bien plus qu’une belle monture de lunettes pour être compétitive. Il existe déjà de nombreux types de lunettes intelligentes, et d’autres sont en cours de développement. La deuxième génération de lunettes intelligentes North Focals devrait arriver cette année. Facebook, en partenariat avec Ray-Ban, est en train de construire quelque chose de similaire. Cependant, les lunettes intelligentes North et Facebook sont toutes deux construites autour d’un assistant vocal intégré en plus du contrôle manuel en forme d’anneau. Amazon s’engage encore plus dans l’audio avec les Echo Frames, qui, comme les Bose Frames, dépendent entièrement d’un assistant vocal pour gérer les lunettes intelligentes. Le marché va mûrir rapidement à ce rythme, ce qui signifie que le N421 devra vraiment impressionner les gens lorsqu’il arrivera dans trois ans.
Selon les données d’une version préliminaire de iOS 14, Apple semble utiliser du matériel de type HTC Vive pour tester ses lunettes de réalité augmentée ou son casque de réalité virtuelle.
Actuellement, la réalité augmentée est limitée aux appareils que vous pouvez tenir dans votre main, comme votre iPhone ou votre iPad. Les progrès des caméras de ces appareils et le nouvel ajout du LiDAR sur l’iPad Pro montrent de plus en plus l’intérêt d’Apple pour le développement de la RA. Ce n’est un secret pour personne qu’un nouveau casque est en cours de développement chez Apple, et pourrait être lancé dès 2021.
La fuite d’un code provenant d’une version interne de l’iOS 14 montre certaines des façons dont Apple teste son casque AR. Un jeu de bowling géolocalisé, qui peut être déclenché à une intersection près du bureau Apple « Mathilda 3 » au 555 N Mathilda Ave à Sunnyvale, en Californie, est en cours d’essai et permet aux utilisateurs de jouer au bowling en utilisant le passage piéton comme piste. Ce bureau se trouve à quelques kilomètres seulement d’Apple Park et pourrait être l’un des endroits utilisés pour développer le casque AR.
Un test de jeu de bowling (à gauche) et une fuite de contrôleur (à droite) Source : MacRumors
Une
photo d’un contrôleur pour les tests a également été obtenue par MacRumors, qui
est très similaire à un contrôleur HTC Vive. Cela permettrait aux développeurs
de mieux contrôler leur kit de test, mais pourrait aussi être un précurseur des
appareils qui seraient expédiés aux utilisateurs.
Quick Look est un outil de réalité augmentée à la disposition des utilisateurs d’Apple qui leur donne une vue en 3D des objets du monde réel. Cet outil est utilisé par les détaillants pour offrir à leurs clients en ligne une expérience immersive. Les détaillants peuvent désormais donner aux utilisateurs la possibilité d’acheter les produits directement à partir de l’interface de réalité augmentée, entre autres choses.
Apple AR
Selon
TechCrunch, Apple donne désormais aux détaillants la possibilité d’ajouter un
« bouton personnalisable » à ces aperçus en 3D qui pourraient permettre
aux acheteurs de faire leurs achats par l’intermédiaire de passerelles de
paiement comme Apple Pay. Quick Look bénéficie également d’un support audio
spatial qui ajoute des sons aux modèles 3D et rend l’expérience plus immersive.
Des
détaillants comme Home Depot, Wayfair et 1-800-Flowers sont en train de mettre
en place cette fonctionnalité qui permettra, par exemple, aux acheteurs de voir
comment le tapis se présente sur le sol ou de vérifier quelles fleurs seraient
belles dans le vase.
Malheureusement,
le produit que vous avez acheté en AR ne passera pas comme par magie dans le
monde réel, il devra encore être livré. Mais la technologie est assez proche du
marché numérique que nous avons vu dans Ready Player One, ou plutôt Summer
Wars. Dans ce dernier, les personnages utilisaient un avatar en ligne pour tout
faire, du jeu au paiement des factures. Mais ces représentations de
science-fiction s’inscrivent mieux dans le domaine de la réalité virtuelle que
dans celui de la réalité augmentée.
Apple
ne semble pas penser que la RV sera aussi grande et fait tout pour la RA. La
société, avec l’aide de son ARKit, a fait d’iOS la plus grande plateforme de
réalité augmentée au monde actuellement. Pour renforcer sa position, le géant
californien devrait lancer sa première paire de lunettes de réalité augmentée
en 2020, qui sera bientôt disponible comme accessoire pour iPhone.
Apple a trouvé un moyen de contrôler les objets en réalité augmentée (AR) et réalité virtuelle (VR), selon un brevet récemment approuvé.
Le brevet d’Apple décrit un appareil qui peut « manipuler des objets virtuels dans un environnement de réalité mixte ou de réalité virtuelle » (USPTO)
Le
système implique un capteur tactile monté sur le doigt de l’utilisateur et peut
également être utilisé pour contrôler à distance des appareils tels que les
iPhones et les haut-parleurs du HomePod ou d’éventuels appareils de réalité
augmentée ou réalité virtuelle qui pourraient voir le jour dans le futur.
Apple
a déposé l’année dernière la demande de brevet « Computer Systems with
Finger Devices » auprès de l’Office américain des brevets et des marques
(USPTO), mais elle n’a été approuvée que la semaine dernière.
Rien
n’indique que le géant technologique envisage de la développer. Apple ne
commente généralement pas les rumeurs ou les produits non commercialisés.
Le
dépôt de brevet décrit comment « l’entrée du doigt d’un utilisateur peut
être utilisée pour manipuler des objets virtuels dans un environnement de
réalité mixte ou de réalité virtuelle alors qu’un dispositif de sortie haptique
dans un appareil à doigt fournit une sortie haptique associée ».
Le
brevet décrit également comment divers capteurs peuvent être utilisés pour
comprendre l’intention d’un utilisateur, notamment des capteurs de force, des
capteurs à ultrasons et des capteurs optiques.
« Un
utilisateur peut interagir avec des objets du monde réel alors que le contenu
généré par l’ordinateur est superposé sur une partie ou sur la totalité des
objets », explique le brevet.
« Les
rotations et les autres mouvements des objets peuvent être convertis en entrée
pour des systèmes de réalité mixte ou de réalité virtuelle ».
Alors,
que pensez-vous de cette nouvelle innovation de la part d’Apple ?
Lorsqu’il s’agit de privilégier les technologies de réalité virtuelle (RV) et de réalité augmentée (RA), le PDG d’Apple, Tim Cook, n’a cessé de faire connaître sa position : la RA est très certainement l’avenir. Cook était à Dublin, en Irlande, cette semaine, pour recevoir un prix de reconnaissance spécial pour les contributions de la société au pays, 6 000 personnes travaillent dans son bureau de Cork et il a discuté de l’avenir de la technologie et du rôle de la RA réalité augmentée.
Photo du CEO d’Apple Tim Cook
Au
cours d’une séance présidée par Martin Shanahan, PDG d’IDA Ireland, il a
interrogé M. Cook sur ses attentes pour les cinq à dix prochaines années :
« Je suis enthousiaste à propos de la RA. Je pense que c’est le prochain
grand projet, et qu’il va imprégner toute notre vie », rapporte Silicon
Republic.
Alors qu’Apple n’a pas encore pénétré le marché des casques de la RA pour concurrencer l’HoloLens 2 de Microsoft, la société a fait de grandes percées dans le domaine des logiciels grâce au lancement d’ARKit en 2017, qui en est maintenant à sa troisième itération. Cela a aidé les développeurs à créer une large gamme d’applications et de jeux vidéo pour les appareils iOS. Outre le divertissement, Cooks voit de nombreuses applications utiles de la RA pour les utilisateurs à domicile : « Vous êtes peut-être sous la voiture en train de changer l’huile, et vous ne savez pas exactement comment faire. Vous pouvez utiliser la RA », mentionne-t-il.
Il
semble également faire un subtil clin d’œil à son aversion pour la RV et aux
raisons pour lesquelles la RA est sa technologie de prédilection : « Je
pense que c’est quelque chose qui n’isole pas les gens. Nous pouvons l’utiliser
pour améliorer notre discussion, pas pour la substituer à la connexion humaine,
ce qui m’a toujours profondément inquiété dans certaines autres
technologies ».
Lors
de sa visite en Irlande, Cook a réussi à rencontrer le développeur War Ducks,
basé à Dublin, l’équipe à l’origine de titres de RV comme Sneaky Bears et
RollerCoaster Legends II : Thor’s Hammer. L’année dernière, la société a
annoncé un investissement de 3,8 millions de dollars US qui allait servir à une
expérience de RV basée sur la localisation.
« Hier,
j’ai rendu visite à une société de développement appelée War Ducks … à
Dublin, il y avait 15 personnes et ils recrutent du personnel et utilisent la
RA pour les jeux », a mentionné Cook. “Vous pouvez imaginer, pour les jeux,
c’est incroyable, mais même pour notre discussion ici. Vous et moi pourrions
parler d’un article et en utilisant la RA, nous pouvons le faire apparaître et
nous pouvons regarder la même chose en même temps.”
