Un rapport détaillé de The Information présente les décisions derrière le retard apparent de plusieurs années du prochain casque AR / VR d’Apple.
En 2021, Bloomberg, The Information et l’analyste de la chaîne d’approvisionnement Ming-Chi Kuo ont publié des rapports affirmant qu’Apple se préparait à sortir un casque haut de gamme pour la réalité virtuelle et la réalité augmentée avec une transmission couleur haute résolution.
L’équipe VR/AR d’Apple s’appelle Technology Development Group (TDG) et est dirigée par l’ancien cadre de Dolby Mike Rockwell. Comme indiqué précédemment par Bloomberg en 2020, TDG a initialement développé un « hub » puissant qui diffuserait sans fil du contenu haute fidélité vers un casque léger. Mais l’ancien directeur de la conception d’Apple, Jony Ive, a apparemment “hésité” à l’idée, insistant plutôt sur le fait que le casque soit autonome. L’affrontement entre Rockwell et Ive aurait eu lieu au cours des derniers mois, lorsque le PDG Tim Cook s’est rangé du côté d’Ive en 2019.
La décision d’expédier un casque autonome a apparemment laissé certains membres de TDG dans “l’incrédulité” car ils avaient construit un logiciel haute fidélité conçu pour fonctionner sur une puissante unité de traitement externe, y compris des avatars photoréalistes.
Le rapport détaille les défis liés à la livraison d’un casque ultra haut de gamme avec tout le traitement intégré sans provoquer de surchauffe ni compromettre la durée de vie de la batterie. La direction d’Apple s’attend apparemment à une expérience AR “bien au-delà” de ce que Meta de Mark Zuckerberg peut offrir, et Rockwell a apparemment du mal à y parvenir.
Le casque dispose apparemment de 14 caméras au total, y compris celles utilisées pour le passthrough, le suivi de position, le suivi des yeux, le suivi du visage, le suivi des mains et le suivi du corps, ce qui cause des « maux de tête » aux ingénieurs en matériel et en algorithmes. Pour gérer cela, Apple a construit une puce de processeur de signal d’image (ISP) dédiée appelée Bora, mais les ingénieurs ont apparemment du mal à éliminer la latence entre celle-ci et le processeur principal du casque – le prochain M2. Pour atténuer cela, Apple a apparemment dû inclure une troisième puce pour agir comme un “conduit rapide”, mais cela n’a pas complètement résolu le problème.
Une caractéristique apparente unique du casque est un écran à l’avant pour permettre aux autres dans la pièce de voir le haut de votre visage et vos yeux. Mais l’ajout de cet écran signifiait apparemment que les caméras passthrough devaient être placées dans des positions «gênantes» loin de l’endroit où se trouveraient les yeux de l’utilisateur, ce qui rendait plus difficile le développement d’algorithmes de reprojection passthrough.
L’Information cite “plusieurs personnes familières avec le casque” comme décrivant ces solutions de fortune comme le reflet de “suringénierie, de solutions trop compliquées qui résultent souvent d’une mauvaise planification”.
Alors que Jony Ive a quitté Apple en 2019, le rapport affirme qu’il est toujours impliqué dans le projet en tant que consultant, les employés devant se rendre à son domicile de San Francisco pour obtenir son approbation sur les changements. Les prototypes précédents intégraient apparemment la batterie dans le bandeau, mais Ive “préfère” une conception avec une batterie attachée que l’utilisateur porte. L’information indique qu’elle ne sait pas quelle approche sera utilisée dans la conception finale.
L’information indique que “quatre personnes qui ont travaillé sur le projet” ont critiqué le manque de concentration sur les jeux. TDG ne mentionne apparemment “presque jamais” les jeux dans les présentations internes et ne développe pas de contrôleur suivi, les méthodes de saisie étant plutôt le suivi manuel et un “pince à linge en forme de pince à linge” qui est apparu dans les dépôts de brevets Apple.
Le rapport de l’information plus tôt cette semaine a cité cinq sources révélant que Tim Cook rend rarement visite à l’équipe travaillant sur le casque – une différence flagrante avec Meta où certains employés seraient frustrés par l’obsession de Zuckerberg pour la réalité virtuelle et la réalité augmentée. L’absence d’un cadre supérieur d’Apple pour défendre le projet a apparemment rendu plus difficile l’affectation de personnel d’ingénierie et de ressources par rapport à l’iPhone et au Mac. Pour obtenir un soutien pour le projet, les membres de l’équipe ont apparemment averti que des entreprises comme Facebook et Magic Leap pourraient finir par posséder le secteur.
L’information précédemment rapportée qu’Apple envisage de fixer le prix du produit à 3 000 dollars, mais indique que le haut dirigeant d’Apple, Dan Riccio, a été affecté au projet l’année dernière pour se concentrer sur la réduction du coût des matériaux afin de le rendre plus abordable. Il devrait finir par concurrencer le projet Cambria de Meta, dont le lancement est prévu plus tard cette année pour « nettement » au-dessus de 800 $. Si l’on en croit les rapports jusqu’à présent, cependant, le produit d’Apple aura une résolution plus élevée, un processeur plus puissant et un design plus mince – bien que la réalisation de tout cela ne soit clairement pas sans défis.