Apple aurait une équipe secrète de centaines d'employés travaillant sur des projets de réalité virtuelle et augmentée.
Par Eternal Staff le 29 novembre 2021
Dernière mise à jouril y a 8 heuresMettre en évidence les changements récents Le projet secret de réalité augmentée et virtuelle d'Apple
Contenu
- Le projet secret de réalité augmentée et virtuelle d'Apple
- Réalité augmentée vs réalité virtuelle
- L'équipe VR/AR d'Apple
- Brevets AR / VR
- Date de lancement
- Futurs plans AR/VR
- Chronologie des lunettes Apple
Apple explore les technologies de réalité virtuelle et de réalité augmentée depuis plus de 10 ans sur la base de dépôts de brevets, mais avec l'explosion de la popularité de la réalité virtuelle et augmentée avec le lancement d'ARKit, le barbotage d'Apple devient de plus en plus sérieux et devrait conduire à un AR/ Produit VR en 2022.
Apple aurait une unité de recherche secrète avec des centaines d'employés travaillant sur la réalité augmentée et la réalité virtuelle et explorant les façons dont les technologies émergentes pourraient être utilisées dans les futurs produits Apple. L'embauche de VR/AR s'est accélérée au cours des dernières années et Apple a acquis plusieurs sociétés AR/VR alors qu'elle poursuivait son travail dans l'espace AR/VR.
Apple est censé travailler sur au moins deux Des projets de réalité augmentée qui incluent un casque de réalité augmentée qui sortira vers 2022, suivi d'une paire de lunettes de réalité augmentée plus élégante à une date ultérieure. Cependant, de nombreuses rumeurs se sont concentrées uniquement sur les lunettes, entraînant une certaine confusion sur les plans d'Apple, mais il semble que le casque AR/VR sera le premier produit lancé.
L'analyste d'Apple, Ming-Chi Kuo, pense que le casque de 'réalité mixte' d'Apple sortira à la fin de 2022 ou au début de 2023, les lunettes Apple suivront en 2025, bien que d'autres sources aient indiqué que les lunettes arriveront en 2023. Le casque est AR/VR, alias réalité mixte, tandis que les lunettes Apple sont en réalité augmentée.
Casque de réalité mixte
L'information et Bloomberg ont tous deux déclaré qu'Apple travaillait sur des lunettes intelligentes ET un casque AR/VR (alias réalité mixte), le casque sortant en premier, suivi des lunettes. On dit que le casque est similaire au casque de réalité virtuelle Oculus Quest de Facebook, mais avec un design plus élégant qui utilise des tissus et des matériaux légers pour assurer le confort du casque.
On dit qu'il présente deux écrans 8K haute résolution et des caméras à détection oculaire qui permettront aux utilisateurs de « lire les petits caractères » et de « voir d'autres personnes se tenant devant et derrière des objets virtuels ». Le casque sera capable de cartographier les surfaces, les bords et les dimensions des pièces avec 'une plus grande précision que les appareils existants sur le marché'. Il aura un écran plus avancé et une puce encore plus rapide que le processeur M1 des Mac 2020.
L'information en février a déclaré qu'il sera équipé de plus d'une douzaine de caméras pour suivre les mouvements de la main en plus de caméras pour voir le monde extérieur, et la conception bloque la vision périphérique pour empêcher la lumière de s'infiltrer dans le champ de vision du porteur. Il pourrait également y avoir une visière orientée vers l'extérieur intégrée à l'écran pour permettre au porteur de montrer des graphiques aux autres.
L'élec prétend que le casque VR comportera un écran micro OLED haute résolution avec jusqu'à 3 000 pixels par pouce. Un écran micro OLED était auparavant répandu pour les lunettes intelligentes, mais pas pour le casque VR.
L'analyste Apple Ming-Chi Kuo a déclaré que le prochain casque de réalité mixte d'Apple comportera 15 modules de caméras optiques au total. Huit des 15 modules de caméra seront utilisés pour des expériences de réalité augmentée transparentes, six modules seront utilisés pour une « biométrie innovante » et un module de caméra sera utilisé pour la détection environnementale.
Kuo croit aussi que le casque d'Apple sera équipé d'un système avancé de suivi oculaire utilisé pour fournir une expérience visuelle intuitive qui interagit de manière transparente avec l'environnement externe, ainsi qu'un fonctionnement plus intuitif qui peut être contrôlé avec des mouvements oculaires et une charge de calcul réduite sous la forme d'un résolution où l'utilisateur ne regarde pas.
Du point de vue de la conception, le casque a été décrit comme ayant une 'visière incurvée élégante attachée au visage par un matériau en maille et des bandeaux interchangeables'. Un serre-tête serait doté d'une technologie audio spatiale comme les AirPods Pro pour une expérience de son surround, tandis qu'un autre offre une autonomie supplémentaire lors de vos déplacements. Apple travaille sur plusieurs méthodes de contrôle, y compris un 'dispositif semblable à un dé à porter au doigt d'une personne'. Le casque serait également capable de répondre aux mouvements oculaires et aux gestes de la main du porteur, tandis qu'un prototype du casque comportait également un cadran physique du côté de la visière. Apple a également testé l'entrée Siri.
Apple veut créer un App Store pour le casque, en mettant l'accent sur les jeux, la diffusion de contenu vidéo et la vidéoconférence. Il a été décrit par Bloomberg comme « environnement numérique 3D complet » conçu pour les jeux, regarder des vidéos et communiquer.
Prototypes de casques actuels sont dits peser environ 200 à 300 grammes, mais Apple vise à réduire le poids final à 100 à 200 grammes si les problèmes techniques peuvent être résolus, ce qui rendrait le casque plus léger que les appareils VR existants. Le casque sera portable avec une alimentation et un stockage indépendants, mais il ne sera pas « mobile » comme un iPhone. Il offrira une « expérience immersive » qui surpasse les produits VR actuellement disponibles, et il pourrait être intégré à Apple TV+ et Apple Arcade.
La fonctionnalité de réalité augmentée du casque est «plus limitée» et, bien qu'une sortie soit prévue pour 2022, Apple aurait rencontré plusieurs obstacles au développement et aurait des estimations de ventes «conservatrices» pour l'appareil. Apple s'attend à vendre environ 180 000 unités, ce qui équivaut à des appareils plus chers comme le Mac Pro. Le casque devrait être beaucoup plus cher que les casques d'autres sociétés, et L'information dit qu'Apple a discuté du prix du casque à environ 3 000 $.
La conception initiale comprenait un ventilateur et des processeurs puissants, résultant en un appareil trop lourd. Apple aurait décidé de rapprocher le casque du visage pour réduire la taille. Les utilisateurs ne pourront pas porter de lunettes lorsqu'ils utilisent le casque, c'est pourquoi Apple a créé un système dans lequel des verres de prescription personnalisés peuvent être insérés sur les écrans VR.
Kuo pense que le casque utilisera une conception de lentille de Fresnel hybride , comprenant trois lentilles empilées par œil en plastique léger. Le but est que la conception permette des focales ultra-courtes et des performances optiques améliorées, ainsi qu'un large champ de vision, et que le poids du casque soit inférieur à 150 grammes.
En termes de puissance, le prochain casque AR/VR comportera un processeur principal haut de gamme c'est similaire à la puce M1 qu'Apple a lancée pour ses Mac en silicium Apple l'année dernière, ainsi qu'un processeur bas de gamme pour gérer les aspects liés aux capteurs de l'appareil.
L'analyste d'Apple, Ming-Chi Kuo, affirme qu'il pourra fonctionner de manière indépendante sans dépendre d'un Mac ou d'un iPhone, ce qui s'écarte d'une rumeur antérieure selon laquelle il besoin d'une attache à un iPhone. La puce haute puissance du casque pilotera une paire d'écrans 4K Micro OLED de Sony et six à huit modules optiques pour fournir une fonctionnalité basée sur la réalité augmentée. Apple a Travail terminé sur le SoC pour le casque AR/VR, et optimisera la transmission de données sans fil, la compression et la décompression de la vidéo et l'efficacité énergétique pour une durée de vie maximale de la batterie, et il n'a pas de moteur neuronal comme certaines des autres puces d'Apple.
Le prochain casque de réalité mixte d'Apple sera offre le Wi-Fi 6E support, qui est la dernière spécification WiFi. Apple prévoit de mettre en œuvre le WiFi 6E pour offrir une expérience immersive haut de gamme avec une connectivité sans fil solide. Le WiFi 6E présente tous les avantages du WiFi 6 mais ajoute un spectre de 6 GHz en plus des bandes 2,4 GHz et 5 GHz pour une bande passante accrue et moins d'interférences entre les appareils.
Rendus de casque de réalité mixte
Le designer Antonio De Rosa a rendus 3D développés sur la base de détails partagés par L'information , nous donnant un aperçu de ce à quoi pourrait ressembler le casque de réalité mixte d'Apple sur la base des rumeurs actuelles.
L'information a décrit le casque comme une ' visière élégante et incurvée attachée au visage par un matériau en maille et des bandeaux interchangeables ', proposée en plusieurs couleurs.
Premiers prototypes de casques
Rumeurs antérieures de CNET en 2018, a suggéré qu'Apple travaillait sur un puissant casque AR/VR avec un écran 8K pour chaque œil qui serait détaché d'un ordinateur ou d'un smartphone, et qui fonctionnerait avec les applications de réalité virtuelle et augmentée.
Plutôt que de dépendre d'une connexion à un smartphone ou à un ordinateur, le casque CNET décrit se connecterait à une « boîte dédiée » à l'aide d'une technologie sans fil haute vitesse à courte portée appelée WiGig 60 GHz. La boîte serait alimentée par un processeur Apple personnalisé de 5 nanomètres 'plus puissant que tout ce qui est actuellement disponible'. La boîte ressemble apparemment à une tour PC, mais ce ne sera pas un véritable ordinateur Mac. Cette conception en forme de boîte a fait l'objet de premières rumeurs et pourrait être un prototype qui a depuis été abandonné pour la version plus élégante que les rumeurs décrivent maintenant.
Des désaccords internes auraient façonné et modifié les objectifs d'Apple pour son casque AR au fil du temps. Apple était visant initialement pour un système ultra-puissant fourni avec un concentrateur pour héberger le processeur comme décrit ci-dessus, mais Jony Ive, qui a depuis quitté l'entreprise, ne voulait pas vendre un appareil qui nécessiterait un appareil fixe séparé pour une fonctionnalité complète.
J'ai plutôt voulu un casque avec une technologie moins puissante qui pourrait être intégrée directement dans l'appareil, mais le chef de l'équipe AR/VR, Mike Rockwell, voulait l'appareil le plus puissant. C'était une impasse qui a duré des mois, et Tim Cook s'est finalement rangé du côté d'Ive. On dit que Ive préfère les lunettes intelligentes AR qui sont également en préparation.
Lunettes intelligentes AR
Apple travaille sur un ensemble de lunettes de réalité augmentée, dont le leaker Jon Prosser a suggéré Apple appellera le « verre Apple ». Ce nom serait un choix inhabituel étant donné la similitude avec le nom de Google Glass, un produit qui existait bien avant que les travaux d'Apple sur les lunettes AR ne soient révélés, il pourrait donc ne pas être exact.
On dit que les lunettes ressemblent à des lunettes ordinaires, les deux lentilles étant dotées d'écrans avec lesquels il est possible d'interagir à l'aide de gestes. Il y aura une option pour obtenir les lunettes sans verres correcteurs à un prix de départ possible de 499 $, avec des verres correcteurs disponibles à un coût supplémentaire.
Selon Bloomberg , les verres sont en un stade précoce de développement , encore plus tôt que le casque AR/VR sur lequel Apple travaille. Les lunettes ont été décrites comme 'dans plusieurs années', bien qu'Apple ait initialement prévu de les sortir dès 2023. Le prototype actuel ressemble à des lunettes de soleil haut de gamme avec des montures épaisses qui abritent la batterie et les puces.
Apple serait l'intention d'utiliser micro-écrans OLED « de pointe » fournis par Sony pour ses prétendues lunettes de réalité augmentée. Les micro-écrans OLED de Sony présentent un taux de réponse ultra-rapide, un contraste ultra-élevé, une large gamme de couleurs, une luminance élevée, une faible réflectance et des pilotes intégrés pour un design fin et léger. Les lunettes auraient un écran de 0,5 pouce avec une résolution de 1280x960.
Kuo s'attend à ce que les lunettes AR soient commercialisées en tant qu'accessoire iPhone et jouera principalement un rôle d'affichage en déchargeant l'informatique, la mise en réseau et le positionnement sur l'iPhone, avec les lunettes fournir une « expérience de réalité augmentée optique transparente » avant tout mobile. Offrir les lunettes AR en tant qu'accessoire iPhone permettra à Apple de les garder minces et légères. Prosser dit que les lunettes ressembleront aux Ray-Ban Wayfarers ou aux lunettes que porte Tim Cook.
Bloomberg a déclaré que les lunettes Apple fonctionneraient avec le système d'exploitation « rOS » ou réalité. rOS serait basé sur iOS, le système d'exploitation qui s'exécute sur l'iPhone. Pour le casque AR, Apple développe une puce 'système sur un package' similaire à celle de l'Apple Watch, bien qu'elle s'appuiera sur l'iPhone comme mentionné ci-dessus.
Au cours du développement d'un casque AR, Apple a considéré les écrans tactiles, l'activation vocale et les gestes de la tête comme méthodes de saisie, et une gamme d'applications allant de la cartographie à la messagerie texte est en cours de prototypage. Les salles de réunion virtuelles et la lecture vidéo à 360 degrés sont également des concepts à l'étude.
Je pensais qu'il y avait des rumeurs initiales d'un lancement 2020 , Bloomberg croit lunettes AR pourrait venir sont à des années de la sortie, le casque VR sortira en 2022. Un rapport de DigiTimes a suggéré que les lunettes AR d'Apple seront lancées en 2021, et l'analyste d'Apple Ming-Chi Kuo s'attend à un lancement en 2022 au plus tôt .
Le leaker Jon Prosser pense qu'Apple dévoilera ses lunettes AR en mars ou juin 2021, mais cela semble inexact compte tenu des estimations de Bloomberg et Kuo.
Prosser dit également qu'Apple travaille sur une version 'Steve Jobs Heritage' en édition limitée des lunettes intelligentes conçues pour ressembler aux lunettes rondes et sans monture que Steve Jobs avait l'habitude de porter, mais Bloomberg Mark Gurman a qualifié cette rumeur de 'fiction complète'.
Apple est travailler avec TSMC pour développer des écrans micro OLED « ultra-avancés » qui seront utilisés dans les prochains appareils de réalité augmentée d'Apple comme les lunettes intelligentes. On dit que les écrans mesurent moins d'un pouce.
Les écrans Micro OLED sont construits directement sur des plaquettes de puce plutôt que sur un substrat de verre, ce qui se traduit par des écrans plus minces, plus petits et plus économes en énergie. Le développement sur les écrans micro OLED serait au stade de la production d'essai et il faudra plusieurs années avant qu'Apple et TSMC ne soient prêts pour la production en série, ce qui rendrait ces écrans appropriés pour les lunettes Apple qui devraient être lancées vers 2023.
Au début de 2021, Apple est dit être entrer dans une « deuxième phase de développement » sur un prototype de lunettes de réalité augmentée. Les lunettes devraient passer par une troisième phase de développement dans quelques mois, puis lorsque la conception du prototype sera terminée, le portable passera par une période de vérification technique de six à neuf mois.
Fuites d'iOS 14 AR
Codes et images trouvé dans iOS 14 confirmez le travail d'Apple sur un casque AR ou VR, avec une photo découverte qui représente un contrôleur d'aspect générique pour un casque de conception similaire au casque HTC Vive Focus. Apple utilise le matériel HTC Vive à des fins de test interne.
Apple teste son équipement AR avec une application iOS 14 appelée Gobi ainsi que des codes QR pour tester des expériences de réalité augmentée. L'une de ces expériences de réalité augmentée est un jeu de bowling sur concordance déclenché à un passage pour piétons spécifique à Sunnyvale, en Californie.
AR dans Xcode
Le code dans le Xcode 11 confirme Le travail d'Apple sur une sorte de casque AR. Il y a des références à des appareils de test avec nom de code ainsi qu'à des frameworks et un shell système liés à ces appareils. Les références suggèrent qu'Apple développe une prise en charge d'une expérience AR montée sur le visage similaire à Daydream de Google.
Partenariat de vannes ?
D'après le site taïwanais DigiTimes , Apple est en partenariat avec développeur de jeux Valve pour son casque AR rumeur. Valve a sorti son premier casque VR, Valve Index, en avril 2019.
Valve a précédemment travaillé avec Apple pour apporter la prise en charge native des casques VR à macOS High Sierra, en tirant parti de la prise en charge de l'eGPU avec une version Mac du logiciel SteamVR.
Autres rumeurs
En novembre 2017, Apple a acheté Vrvana, une société qui a développé un casque de réalité mixte appelé Totem. La technologie de Vrvana pourrait potentiellement être utilisée dans un futur casque Apple. Apple a suivi son achat de Vrvana par l'acquisition d'Akonia Holographics, une société qui fabrique des lentilles pour lunettes intelligentes AR.
Des rumeurs ont également suggéré qu'Apple pourrait intégrer sa recherche en réalité augmentée dans son projet de voiture en cours dans le cadre d'un système logiciel embarqué qui pourrait inclure un affichage tête haute ou d'autres fonctionnalités.
Noter: Vous voyez une erreur dans cette rafle ou souhaitez faire part de vos commentaires ? .
Réalité augmentée vs réalité virtuelle
La réalité augmentée (AR) et la réalité virtuelle (VR) sont des technologies similaires, mais il existe une différence majeure entre elles et leurs applications potentielles varient considérablement. La réalité virtuelle fait référence à une expérience immersive complète dans un monde virtuel, tandis que la réalité augmentée fait référence à une vision modifiée du monde réel.
La différence peut peut-être être mieux résumée par une comparaison entre deux produits, un AR et un VR. lunettes Google , la désormais défunte série de lunettes intelligentes de Google, est un exemple de réalité augmentée. Le Google Glass porté par les yeux permet aux utilisateurs de voir le monde tel qu'il est, mais il offre un affichage tête haute qui superpose les informations pertinentes fournies par l'ordinateur sur cette vue du monde réel, telles que la météo locale, les cartes et les notifications.
Ceci est similaire à ce sur quoi Apple travaillerait avec ses rumeurs de « lunettes intelligentes ».
En comparaison, Facebook Oculus Rift est un casque de réalité virtuelle offrant une expérience visuelle immersive qui n'augmente pas le monde réel avec des informations sensorielles supplémentaires - il remplace complètement le monde réel par un monde simulé.
La réalité augmentée fournit un contexte généré par ordinateur et des informations sur le monde qui nous entoure tout en nous permettant d'interagir avec notre environnement, tandis que la réalité virtuelle est conçue pour nous isoler de notre environnement afin que nous puissions interagir avec des mondes fictifs.
Apple 12 pro max date de sortie
Les applications potentielles des deux sont très différentes. La réalité virtuelle est singulièrement axée sur la consommation de contenu immersif, car elle donne au porteur l'impression qu'il vit réellement ce qui se passe dans le monde simulé grâce à un retour visuel, tactile et audio. La réalité virtuelle est actuellement largement liée au jeu, mais elle a également le potentiel de recréer des expériences du monde réel à des fins éducatives ou de formation.
La réalité augmentée ne repose pas sur un contenu immersif et, bien que moins excitante car elle augmente la réalité au lieu de la remplacer, elle a un plus large éventail d'applications potentielles. En fait, les applications et les jeux de réalité augmentée sont facilement disponibles dans iOS 11 grâce à ARKit.
Avec ARKit, un appareil iOS est capable d'identifier une surface comme une table, puis des objets virtuels peuvent y être ajoutés. En raison de la puissance de calcul de l'iPhone et de l'iPad, les capacités de réalité augmentée d'ARKit sont impressionnantes. ARKit est déjà utilisé pour créer une vaste gamme d'applications et de jeux, mélangeant des objets numériques avec le monde réel.
jouer
Apple peut viser un produit qui fonctionne à la fois avec la réalité augmentée et la réalité virtuelle, comme le suggèrent de récentes rumeurs indiquant un travail sur un casque AR/VR. Un tel produit pourrait être utilisé pour des applications de réalité virtuelle sérieuses ainsi que des expériences de réalité augmentée, et il serait similaire au Microsoft HoloLens.
L'équipe VR/AR d'Apple
Le travail d'Apple sur la réalité virtuelle et augmentée remonte à plusieurs années, mais des rumeurs ont commencé à partir de mars 2015 lorsque la nouvelle a été annoncée qu'Apple avait une petite équipe de personnes travaillant sur la réalité augmentée. En 2015 et début 2016, l'équipe d'Apple s'est agrandie au fur et à mesure que l'entreprise embauchait des employés ayant une expertise dans la technologie AR/VR et réalisait plusieurs acquisitions connexes.
L'équipe AR/VR d'Apple comprend plusieurs centaines d'ingénieurs d'Apple, qui ont tous une expertise en réalité virtuelle et augmentée. L'équipe travaille dans des parcs de bureaux à Cupertino et à Sunnyvale, et Apple explore plusieurs projets matériels et logiciels sous le nom de code « T288 ».
L'équipe de réalité augmentée d'Apple combine « les forces de ses vétérans du matériel et des logiciels » et est dirigée par Mike Rockwell, qui vient de Dolby. D'anciens employés d'entreprises comme Oculus, HoloLens, Amazon (de l'équipe VR), la société d'animation 3D Weta Digital et Lucasfilm travaillent sur la RA chez Apple.
L'ancien chef de l'ingénierie matérielle d'Apple, Dan Riccio, a fait la transition en janvier 2021 à un nouveau rôle où il est superviser le travail d'Apple sur un casque AR/VR. Le projet a été confronté à des défis de développement, et les dirigeants d'Apple pensent que l'orientation de Riccio peut aider.
Embauches
L'une des embauches AR/VR les plus importantes d'Apple était le professeur d'informatique Doug Bowman, qui dirigeait auparavant le Virginia Tech's Center for Human-Computer Interaction. Il se spécialise dans la conception d'interfaces utilisateur en trois dimensions et a écrit un livre sur le sujet couvrant les interfaces 3D et les avantages des environnements virtuels immersifs. Il possède une expertise à la fois en réalité virtuelle et en réalité augmentée.
Apple a également embauché des employés qui ont travaillé sur des produits de réalité virtuelle ou augmentée chez Microsoft et Lytro. Certaines embauches récentes proviendraient de l'équipe HoloLens de Microsoft, tandis que d'autres travaillaient chez Lytro, une entreprise travaillant sur une caméra capable de mélanger l'action en direct et l'infographie pour une expérience de réalité virtuelle en direct. Les employés issus de l'équipe HoloLens auraient de l'expérience dans la création d'un casque de réalité augmentée avancé.
La caméra Lytro Immerge 360 degrés
Zeyu Li, qui a été ingénieur principal en vision par ordinateur chez Magic Leap (une startup développant un écran AR/VR monté sur la tête), travaille maintenant chez Apple en tant qu'« ingénieur senior en algorithme de vision par ordinateur ».
Yury Petrov, un ancien chercheur chez Oculus, propriété de Facebook, est désormais « chercheur scientifique » chez Apple. Selon son profil LinkedIn, Petrov a étudié des expériences de réalité virtuelle, des prototypes d'optique et développé un logiciel de simulation informatique.
Jeff Norris, expert en réalité augmentée, a rejoint Apple en avril 2017 en tant que cadre supérieur travaillant au sein de l'équipe de réalité augmentée de l'entreprise. Norris a fondé le Mission Operations Innovation Office et le JPL Ops Lab à la NASA. Il a dirigé plusieurs projets axés sur l'interaction homme-système en mettant l'accent sur la réalité virtuelle et augmentée.
En mai 2018, Apple a embauché Sterling Crispin, qui a développé une application de peinture pour les casques VR mobiles. 'Cyber Paint' permet aux porteurs de casques VR de créer des images 2D à 260 degrés sur Oculus Go, Daydream, GearVR et Vive Focus. La page LinkedIn de Crispin indique qu'il travaille en tant que 'chercheur en prototypage', suggérant qu'il a rejoint l'équipe qui travaillerait sur la technologie des casques VR/AR.
En décembre 2018, Apple a embauché Andrew Kim, ancien concepteur senior de Tesla et Microsoft HoloLens, et compte tenu de son histoire, il pourrait travailler sur le projet de lunettes AR d'Apple ou sur sa prochaine voiture Apple qui serait en développement.
Le fondateur de Jaunt VR, Arthur van Hoff, a rejoint Apple en tant qu'architecte senior en avril 2019. Avant de travailler chez Apple, son entreprise matériel VR créé , y compris une caméra VR 3D de 100 000 $ appelée Jaunt One. Avant le départ de van Hoff de l'entreprise, Jaunt a échoué et est passé aux expériences de réalité augmentée.
L'équipe d'Apple comprenant des centaines d'employés, de nombreuses autres embauches d'experts en réalité virtuelle sont passées sous le radar. Sur LinkedIn, il y a plusieurs ingénieurs logiciels avec une expérience de réalité virtuelle qui sont employés par Apple, mais il n'est pas clair s'ils travaillent dans l'équipe secrète AR/VR.
Apple en juillet 2019 a déplacé Kim Vorrath, l'un de ses dirigeants de logiciels, vers le casque de réalité augmentée division pour «mettre de l'ordre» dans l'équipe. Vorrath a supervisé la gestion de programme au sein de l'équipe de développement de logiciels pendant 15 ans et a été décrit comme une « force puissante » qui veille à ce que les employés respectent les délais tout en détectant les bogues.
Acquisitions
De nombreux membres de l'équipe AR/VR d'Apple ont peut-être rejoint l'entreprise via des acquisitions. Depuis 2015, Apple a acheté plusieurs sociétés qui ont créé des produits liés à l'AR/VR, et certaines de ses acquisitions AR/VR remontent même à plusieurs années.
Akonia HolographiqueApple a racheté en août 2018 Akonia Holographics, une startup qui fabrique des verres pour lunettes de réalité augmentée. Akonia Holographics annonce la « première optique holographique réfléchissante et guide d'ondes en volume au monde disponible dans le commerce pour les éléments d'affichage transparents dans les lunettes intelligentes ».
Les écrans qu'il fabrique utiliseraient la technologie HoloMirror de l'entreprise pour des « performances ultra-claires et en couleur » afin de permettre « les écrans portés par la tête les plus minces et les plus légers au monde ».
VrvanaEn novembre 2017, Apple a acheté Vrvana, une société qui a développé un casque de réalité mixte appelé Totem. Totem, qui n'a jamais été rendu public, a été conçu pour combiner les technologies de réalité augmentée et virtuelle dans un seul casque, fusionnant des capacités de réalité virtuelle complètes avec des caméras pass-through pour permettre des fonctionnalités de réalité augmentée sur écran.
Totem a essentiellement utilisé un ensemble de caméras pour projeter des images du monde réel sur son écran OLED 1440p intégré, une approche quelque peu unique qui le distingue des produits concurrents tels que HoloLens de Microsoft, qui utilise un écran transparent pour combiner réalité virtuelle et augmentée. Apple pourrait envisager d'utiliser certaines des technologies de Totem dans un futur produit.
PrimeSenseApple a racheté la société israélienne de détection corporelle 3D PrimeSense en 2013, suscitant des spéculations selon lesquelles des capacités basées sur le mouvement seraient implémentées dans l'Apple TV. La technologie de profondeur 3D et les capacités de détection de mouvement de PrimeSense ont été utilisées dans la plate-forme Kinect initiale de Microsoft.
jouerPrimeSense a utilisé la lumière proche infrarouge pour projeter une lumière invisible dans une pièce ou une scène, qui est ensuite lue par un capteur d'image CMOS pour créer une image virtuelle d'un objet ou d'une personne. Cela permet des commandes basées sur le mouvement pour les interfaces logicielles, mais il est également capable de faire des choses comme mesurer des objets virtuels et fournir des distances ou des tailles relatives, utiles pour les applications de réalité augmentée comme les jeux interactifs, la cartographie en intérieur, etc. La technologie PrimeSense peut également créer des analyses à 360 degrés très précises de personnes et d'objets, potentiellement utiles pour les applications de réalité virtuelle.
MétaioApple a acquis la startup de réalité augmentée Metaio en mai 2015. Metaio a créé un produit appelé Metaio Creator, qui pourrait être utilisé pour créer des scénarios de réalité augmentée en quelques minutes seulement. Avant d'être acheté par Apple, le logiciel de Metaio était utilisé par des entreprises comme Ferrari, qui ont créé un showroom de réalité augmentée.
jouerLa technologie Metaio a également été utilisée à Berlin pour permettre aux personnes visitant le site du mur de Berlin d'utiliser un smartphone ou une tablette pour voir à quoi ressemblait la zone lorsque le mur de Berlin était encore debout. La technologie de Metaio pourrait potentiellement être utilisée pour implémenter des capacités de réalité augmentée dans des applications Apple telles que Maps.
Changement de visageApple a acquis Faceshift en août 2015, marquant son deuxième achat de réalité augmentée en 2015. Avant d'être racheté par Apple, Faceshift a travaillé avec des studios de jeux et d'animation sur une technologie conçue pour capturer rapidement et avec précision les expressions faciales à l'aide de capteurs 3D, les transformant en visages animés dans temps réel. Faceshift travaillait également sur un produit axé sur le consommateur qui permettrait aux gens de transformer leur visage en visages de dessins animés ou de monstres en temps réel dans Skype.
jouerLa technologie de Faceshift propose un large éventail de cas d'utilisation possibles, et Apple semble utiliser cette fonctionnalité pour alimenter Animoji dans l'iPhone X.
émotifEmotient, une entreprise qui a construit des outils d'analyse des expressions faciales, a été acquise par Apple en janvier 2016. La technologie d'Emotient utilise l'intelligence artificielle et l'apprentissage automatique pour lire les émotions humaines, des fonctionnalités qui ont été utilisées dans le monde réel par les annonceurs pour déterminer les réactions émotionnelles à annonces.
jouerIl y a des dizaines de choses qu'Apple pourrait faire avec Emotient, allant d'une meilleure détection faciale dans l'application Photos à l'analyse des sentiments des clients dans les magasins de détail Apple au déverrouillage des appareils iOS, mais il a également des utilisations potentielles AR/VR. Comme Faceshift, la technologie d'Emotient pourrait être utilisée pour analyser et transformer les expressions faciales pour la création d'avatars virtuels, utiles à des fins de médias sociaux et de jeux. La technologie émotive a probablement été utilisée pour Animoji.
Survol des médiasAchetée début 2016, Flyby Media est une autre entreprise qui a travaillé sur la réalité augmentée. Survol créé une application qui fonctionnait avec le smartphone « Project Tango » équipé de capteurs 3D de Google, permettant de joindre des messages à des objets du monde réel et de les visualiser par d'autres avec l'un des appareils de Google.
Un aperçu de l'application Flyby Messenger avant qu'elle ne soit retirée de l'App Store, via TechCrunch Par exemple, une personne pourrait « scanner » un point de repère comme le Golden Gate Bridge de San Francisco et y écrire un message. Une personne visitant le pont plus tard serait alors en mesure de scanner le pont avec l'application Flyby pour voir le message. L'application Flyby a probablement attiré l'attention d'Apple car elle était capable de reconnaître et de comprendre différents objets numérisés, une technologie qui pouvait être utilisée par Apple de plusieurs manières dans des applications telles que Photos et Cartes.
Visage réelEn février 2017, Apple a acheté RealFace, une société de cybersécurité et d'apprentissage automatique spécialisée dans la technologie de reconnaissance faciale, qui pourrait potentiellement être utilisée pour de futures fonctionnalités de réalité augmentée.
RealFace a développé une technologie de reconnaissance faciale intégrant l'intelligence artificielle pour une reconnaissance faciale sans friction. La technologie Realface a probablement été utilisée dans l'iPhone X , le premier smartphone d'Apple doté de capacités de reconnaissance faciale sous la forme de Face ID.
SuivantVRPomme en mai 2020 acquis NextVR , une société californienne qui combinait la réalité virtuelle avec le sport, la musique et le divertissement, offrant des expériences VR pour regarder des événements en direct sur des casques VR de PlayStation, HTC, Oculus, Google, Microsoft et d'autres fabricants.
Pomme en août 2020 acheté des espaces de démarrage VR , une entreprise qui a conçu des expériences de réalité virtuelle que les gens pourraient vivre dans des centres commerciaux et d'autres lieux, comme « Terminator Salvation : Fight for the Future ». Spaces a également créé des expériences de réalité virtuelle pour les applications de communication vidéo comme Zoom, ce qu'Apple pourrait potentiellement intégrer dans un futur produit AR/VR.
Brevets AR / VR
Apple a déposé plusieurs brevets directement liés à un casque de réalité virtuelle, tous datant de plusieurs années. Bien que la technologie ait probablement quelque peu progressé au-delà de celles-ci, elles offrent un aperçu intéressant des idées qu'Apple a explorées dans le passé.
Une demande de brevet de 2008 couvrait un « système d'affichage personnel » assez basique conçu pour imiter l'expérience d'être dans une salle de cinéma en regardant une vidéo.
Un deuxième brevet décrivait un « système d'affichage monté sur la tête » avec un « moteur laser » qui projetait des images sur un écran en verre transparent porté sur les yeux, semblable à des lunettes. Dans cette configuration, le casque est connecté à un lecteur vidéo portable tel qu'un iPod pour fournir une puissance de traitement.
Un troisième brevet déposé à l'origine en 2008 était de conception similaire, couvrant un casque vidéo de type lunettes conçu pour permettre aux utilisateurs de regarder des films et d'autres contenus. Il décrivait deux modules optiques réglables alignés avec l'œil de l'utilisateur, qui pourraient fournir une correction de la vision et permettre la visualisation de contenu 3D. Apple a décrit cela comme offrant une expérience de visualisation multimédia personnelle.
À quatrième brevet à partir de 2008 couvrait un cadre de casque vidéo similaire au Google Glass, qui permettrait à un utilisateur de glisser son iPhone ou iPod dans le casque pour fournir une vidéo. Le casque a été décrit comme un produit de réalité augmentée qui permettrait aux utilisateurs de faire des choses comme regarder une vidéo ou consulter leurs e-mails tout en gardant un œil sur leur environnement.
Au-delà des brevets liés aux casques, Apple a également déposé des brevets décrivant d'autres façons dont les fonctionnalités de réalité virtuelle et augmentée pourraient être implémentées dans ses appareils. Une demande de brevet de 2009, par exemple, couvrait les écrans 3D équipés d'une caméra qui changeaient de perspective en fonction de la position relative d'un utilisateur.
Un tel affichage détecterait le mouvement de la tête, permettant à un utilisateur de déplacer sa tête pour regarder une image 3D sous différents angles tout en incorporant également des éléments de l'environnement d'un utilisateur.
Les brevets de 2010 et 2012 décrivaient l'utilisation de capteurs de mouvement pour créer une interface 3D pour les appareils iOS à l'aide de techniques de réalité augmentée. Apple a décrit l'interface comme une 'salle virtuelle' parcourue en manipulant l'orientation de l'appareil à l'aide de capteurs intégrés ou de gestes.
En 2011, Apple a déposé un brevet pour une fonctionnalité de réalité augmentée dans l'application Maps liée à la cartographie de la distance aux points de repère notables. Avec la caméra, un utilisateur peut regarder la zone qui l'entoure et obtenir des estimations en temps réel de la distance entre deux points ainsi que des superpositions d'informations pertinentes.
Un brevet déposé en 2014 et accordé en 2017 porte sur un système de réalité augmentée mobile capable de détecter des objets dans l'environnement et de les superposer avec des informations virtuelles grâce à l'utilisation de caméras, d'un écran et d'une interface utilisateur. Apple décrit le système comme idéal pour un visiocasque, mais il montre également qu'il est utilisé dans les smartphones.
Apple a travaillé sur une technologie de réalité virtuelle qui pourrait être utilisé dans les véhicules autonomes . Plusieurs brevets Apple décrivent un système qui comprend un système de réalité virtuelle embarqué avec un casque VR porté pour offrir du divertissement et atténuer le mal des transports lié à des tâches telles que la lecture et le travail pendant qu'un véhicule est en mouvement.
À Demande de brevet de juillet 2020 couvre les méthodes de saisie possibles avec les lunettes Apple, décrivant un système dans lequel les lunettes utilisent la détection de chaleur infrarouge pour détecter quand quelqu'un touche un objet du monde réel, permettant aux lunettes de projeter ensuite des commandes sur une surface du monde réel.
Avec cette méthode, les lunettes Apple pourraient se projeter dans l'interface de contrôle AR sur n'importe quel objet réel dans le monde réel pour un effet de superposition de réalité mixte.
Apple en février 2021 déposé un certain nombre de brevets lié à ses travaux sur un casque de réalité mixte présumé, les brevets couvrant les éléments de conception, le réglage de l'objectif, la technologie de suivi oculaire et les logiciels.
Apple a développé plusieurs méthodes pour rendre un casque plus confortable à porter tout en le gardant en sécurité et en bloquant la lumière, ainsi qu'un système de réglage détaillé de l'objectif qui utilise un fluide pour déplacer les lentilles de manière transparente afin de personnaliser l'ajustement pour chaque utilisateur.
Apple détaille également un système de suivi oculaire qui utilise la lumière infrarouge pour détecter la position, et il existe également un brevet sur la façon dont les documents peuvent être modifiés dans un espace 3D virtuel à l'aide du casque et de la détection des gestes.
Apple a systèmes brevetés pour enregistrer une vidéo à partir d'un casque, où des capteurs de suivi du regard intégrés pourraient fournir une indication de l'endroit où une personne regarde actuellement, ce qui pourrait diriger une caméra intégrée pour enregistrer la scène où les yeux de l'utilisateur sont positionnés, au lieu de simplement enregistrer ce qui est devant l'utilisateur.
Une autre demande de brevet déposé en février 2021 a montré qu'Apple recherchait un appareil monté sur le doigt avec un ensemble de capteurs et un retour haptique à utiliser comme dispositif de contrôle pour un casque de réalité mixte.
Le dispositif de commande a une forme qui permet aux utilisateurs de sentir naturellement les objets dans leur environnement et peut déterminer avec précision la manière dont l'utilisateur déplace son doigt et interagit avec les surfaces. On dit que le système est si précis qu'il peut détecter la force avec laquelle un utilisateur appuie sur une surface et la direction exacte de cette force, délivrant un retour haptique en réponse.
Couplé à un casque AR ou VR, Apple dit que cet appareil monté sur le doigt pourrait 'donner à un utilisateur la sensation d'interagir sur un clavier physique lorsque l'utilisateur tape du doigt sur une surface de table' ou 'permettre à un utilisateur de fournir un joystick -type input' pour jouer en utilisant uniquement le mouvement du bout des doigts de l'utilisateur.
Date de lancement
L'analyste Apple Ming-Chi Kuo a déclaré en octobre 2021 que le prochain casque de réalité mixte a été retardé jusqu'à fin 2022 au plus tôt, la production devant démarrer au quatrième trimestre 2022.
Bloomberg pense également que le casque AR/VR sur lequel Apple travaille sortira en 2022, tandis que les lunettes AR en cours de développement sortiront à une date ultérieure. L'information a suggéré qu'un casque AR/VR sortira en 2022, suivi de lunettes intelligentes en 2023, mais il s'agit d'un calendrier plus précoce que celui indiqué par d'autres sources pour le produit de lunettes.
DigiTimes dit que le prochain casque AR/VR entrer dans la production de masse au deuxième trimestre 2022, avec un lancement à suivre au quatrième trimestre.Apple serait en retard dans les tests des lunettes intelligentes en cours, ce qui pourrait peut-être entraîner des retards. Apple était censé entrer dans la deuxième phase de développement des lunettes au début de 2021, mais les tests de la phase deux n'ont pas encore commencé, donc la production en volume au premier trimestre 2022 est pas attendu .
Les analystes de Morgan Stanley ont récemment déclaré que le casque AR était « sur le point de décoller » sur la base du nombre de brevets Apple a publié. Les analystes pensent que le portefeuille de brevets d'Apple pour son casque AR/VR est similaire au portefeuille de brevets qu'il a construit avant le lancement de l'Apple Watch.
Futurs plans AR/VR
L'analyste d'Apple Ming-Chi Kuo pense qu'Apple pourrait planifier des « lentilles de contact » de réalité augmentée qui pourrait lancer quelque part dans les années 2030.
Selon Kuo, les lentilles feront passer l'électronique de l'ère de « l'informatique visible » à « l'informatique invisible ». Il n'y a « aucune visibilité » pour les lentilles de contact à l'heure actuelle, et ce n'est pas un produit garanti qu'Apple développera.
Articles Populaires