Microsoft présente de nouvelles démonstrations HoloLens lors de la conférence Build

Publicité

Le prochain casque HoloLens de Microsoft est le premier appareil de réalité augmentée haut de gamme présenté au public. Malheureusement, Microsoft a été si borné que nous ne savons pas grand-chose à ce sujet.

Aujourd'hui à Conférence des développeurs de build de Microsoft à San Francisco, nous avons eu un autre aperçu alléchant de la technologie. La démo elle-même est brillante mais pas très informative. Cependant, nous pouvons identifier certains détails importants en lisant entre les lignes. Dans ce cas, ce que Microsoft a choisi de ne pas montrer est plus informatif que ce qu'ils ont fait.

La démo

Plusieurs ingénieurs HoloLens sont venus sur scène pour montrer certaines des nouvelles démos qu'ils ont développées pour le matériel. Une démo se déroule comme une reconstitution de l'appartement dépressivement dépouillé d'un ingénieur et couvre les murs et le sol avec des applications et des jouets virtuels. Un autre fait venir des médecins pour montrer un modèle de corps humain, puis le démonte. Enfin, un robot kit développe un haut du corps virtuel expressif et déplie un grand panneau d'état, lui permettant d'être modifié en temps réel.

Le diable, les détails

Jusqu'à présent, si impressionnant - mais beaucoup de mes premiers questions sur le HoloLens Cinq questions sur le «projet HoloLens» de MicrosoftLe nouveau casque de réalité augmentée de Microsoft est très excitant - mais peut-il résoudre les problèmes fondamentaux de la réalité augmentée? Lire la suite restent sans réponse. Alors regardons de plus près.

Occlusion

La démo vous semble un peu mise en scène? Regardez attentivement les mouvements de la caméra. Ce n'est pas seulement la maladresse habituelle d'un salon. Revoyez la démo et recherchez les moments où un être humain passe devant un objet virtuel.

C'est appelé occlusion, et c'est un problème difficile en réalité augmentée. Afin de rendre ce phénomène correctement, le HoloLens doit cartographier le monde suffisamment rapidement et avec précision pour couper la silhouette de la personne de l'image virtuelle. Sinon, vous aurez un conflit de profondeur: votre vision stéréo vous dira que l'objet virtuel est derrière la personne, mais il sera affiché au-dessus d'eux. Comme nous l’avons appris de la réalité virtuelle, ces types de conflits bouleversent et détruisent l’illusion que les objets avec lesquels vous interagissez sont des parties tangibles du monde.

La démo va très loin pour éviter cela. Vous pouvez voir l'opérateur de la caméra réagir lorsque l'une des personnes sur scène se dirige vers un objet virtuel, se déplaçant pour l'empêcher de se chevaucher. La démo entière est minutieusement chorégraphiée. En sortant de la chaise dans la première démo, le gars sur la scène se met devant un robot virtuel - et, commodément, la caméra est pointée ailleurs exactement à ce moment.

Ils ne gâchent que quelques fois. Pendant la démo du robot, le robot passe brièvement devant quelques points virtuels sur le sol, et l'un des présentateurs marche dessus. Dans les deux cas, il y a un conflit profond: vous continuez à voir les points virtuels à travers les objets réels, ce qui implique que Microsoft n'a pas encore de solution à ce problème.

Nous pouvons voir plus de preuves de cela dans la même démo, quand une visualisation est affichée de la carte de l'environnement du casque. Si vous le parcourez image par image et que vous regardez attentivement, vous pouvez voir que la carte est incorrecte de plusieurs manières: la table est sur une plate-forme surélevée, qui devient un vague renflement dans la carte. Le robot, de même, est visible sur la carte, mais seulement comme une petite bosse. Les bords du bureau manquent. Vous pouvez probablement blâmer ces problèmes sur la résolution limitée du capteur de profondeur Kinect à l'intérieur du casque. Quoi qu'il en soit, il n'y a tout simplement pas assez de précision ici pour occlure correctement les objets virtuels.

Soyons clairs ici: cela pourrait être un spectacle. Le but de l'HoloLens est de combiner de manière transparente des objets réels et virtuels de manière convaincante. L'occlusion est une partie nécessaire de l'illusion. L'occlusion est un indice de profondeur si puissant que l'ajout d'une seule ligne blanche à une vidéo peut créer par lui-même un puissant effet 3D.

Microsoft en est clairement conscient. Ils montrent l'occlusion dans leurs supports promotionnels. Pourtant, d'après leurs démos, il ne semble pas qu'ils puissent réellement le faire. Si Microsoft ne peut pas résoudre ce problème, il n'a pas de produit. Les utilisateurs ne vivent pas dans des démos minutieusement chorégraphiées dans des maisons vides. Ils ne toléreront pas les erreurs de rendu constantes et immersives. Honnêtement, je suis un peu étonné que davantage de la presse technique ne parle pas de ce problème. Je suis très curieux de savoir si Microsoft a un plan pour résoudre ce problème.

Interface utilisateur

Chaque fois que je regarde une vidéo montrant l'interface utilisateur HoloLens, la phrase qui me revient constamment à l'esprit était: «Allons-nous vraiment recommencer?»

Avec chaque nouvelle plate-forme informatique, à la fois le PC et les smartphones, nous traversons un cycle de mauvaise interface utilisateur avant de le découvrir. Le problème est que les mauvaises interfaces utilisateur sont mauvaises exactement de la même manière, et elles sont mauvaises de la même manière que l'interface utilisateur HoloLens est mauvaise. Je souhaite, pour une fois, que nous puissions reconnaître le modèle et passer à la bonne partie. Voici ce que HoloLens (et chaque nouvelle plate-forme) fait de mal:

• Tout d'abord, ils essaient de recréer d'anciens paradigmes, au lieu d'en créer de nouveaux. Pensez aux anciens smartphones Treo qui ont été construits autour d'un clavier physique et d'un stylet émulant une souris. Le HoloLens est exactement le même, en utilisant votre tête pour émuler une souris et votre doigt pour cliquer. Heck, à un moment donné, l'ingénieur «traîne» une fenêtre en la verrouillant sur sa tête, quelque chose que l'Oculus VR Guide des meilleures pratiques met explicitement en garde contre. Le HoloLens n'est pas un PC, et essayer d'utiliser une interface utilisateur de PC ne fonctionnera pas.
• Deuxièmement, ils s'enroulent dans les parties brillantes de l'interface et créent des peluches ornées et inutiles. Tu te souviens de Clippy? Microsoft Bob? Le faux cuir de l'ancienne application iOS notes? Ce truc est un encombrement visuel inutile. Le chien virtuel et le bol à poisson et le robot sont exactement la même chose. Combien de fois devons-nous le faire avant de réaliser que le minimalisme est la seule bonne idée?

Pendant que nous y sommes, les «hologrammes» eux-mêmes sont un gâchis visuel. Ils ne peuvent pas décider s’il s’agit de vitres propres ou d’objets de dessin animé loufoques. Les éléments de l'interface utilisateur sont beaucoup trop grands, nécessitant des gestes étendus à utiliser, allant jusqu'à et y compris se promener physiquement, ce qui est une mauvaise conception pour de nombreuses raisons.

S'il semble que je suis bouleversé à ce sujet, c'est parce que les interfaces utilisateur immersives finiront par être vraiment, vraiment cool un jour. L'interface utilisateur HoloLens qui a été montrée jusqu'à présent est un gâchis complet, et c'est dommage. Une bonne interface utilisateur est la différence entre le Treo et l'iPhone - entre un ordinateur central IBM et le PC original avec souris et clavier. C’est la différence entre un jouet pour les nerds et une innovation qui change le monde.

Facteur de forme

Il y a une bonne nouvelle importante. Microsoft a apporté «des centaines» d'appareils HoloLens au salon et les présente aux participants. La dernière fois que Microsoft a fait des démos, les gens étaient attachés à des casques filaires encombrants. Les casques utilisés sur scène étaient des accessoires qui ne pouvaient afficher qu'une image en noir et blanc à basse résolution. Cependant, le présentateur déclare clairement que les casques sont "tout comme ceux que vous avez vus sur scène aujourd'hui." En d'autre En d'autres termes, Microsoft a réussi à miniaturiser le matériel HoloLens pour l'adapter à un facteur de forme portable, ce qui est formidable. nouvelles.

Voici un développeur expérience avec le nouveau matériel:

«Je suis allé« sur le chantier »et ils ont superposé les plans au mur. Ensuite, je pouvais voir à quoi ressemblerait une porte et remarquer qu'un faisceau était sur le chemin. Nous avons éloigné la porte, puis ajouté une couche avec de l'électricité et de la plomberie, et nous avons vu qu'un tuyau était maintenant sur le chemin. J'ai «regardé et l'air a cliqué» sur le tuyau et j'ai laissé une note vocale pour que le plombier éloigne le tuyau.

Puis je suis revenu dans le rôle du plombier et j'ai récupéré ma note (elle était suspendue là), regardé et cliqué, et entendu ma propre voix enregistrée.

Le port de l'appareil nécessite une certaine habitude. Il n'était pas super bien ajusté et appuyait un peu sur mon nez. Mais je pense que je peux mieux l'ajuster avec le temps.

La zone holographique est moins étendue que je ne le pensais. C'est un rectangle devant vos yeux mais si vous avez une bonne vision latérale (comme moi), c'est un peu dérangeant car l'hologramme sera recadré lorsque vous bougerez la tête.

Dans l'ensemble, il est extrêmement impressionnant et j'ai hâte de le développer. "

Alors que l'auteur note que l'appareil a toujours un faible champ de vision, il semble impressionné par le matériel dans son ensemble, ce qui est un signe prometteur. À terme, l'AR sera un remplacement plus puissant et plus flexible de la réalité virtuelle - qui est déjà une technologie incroyable Pourquoi la technologie de réalité virtuelle vous épatera dans 5 ansL'avenir de la réalité virtuelle comprend le suivi de la tête, des yeux et des expressions, le toucher simulé et bien plus encore. Ces technologies incroyables seront à votre disposition dans 5 ans ou moins. Lire la suite . La grande question est - à quelle distance sommes-nous?

Support développeur

Bien que cela ne soit pas mentionné dans la vidéo d'annonce, Microsoft a également annoncé que, via son partenariat avec Unity, il y aura également un support complet pour HoloLens in Unity, l'un des outils les plus couramment utilisés pour le jeu indépendant développement. La prise en charge inclura la possibilité d'effectuer un rendu via HoloLens et d'obtenir des entrées de l'appareil de différentes manières. Unity Free et Unity Pro auront tous deux un support HoloLens gratuit. Bien que l'intégration ne soit pas encore terminée, Microsoft donne déjà des cours de courte durée au Build conférence utilisant le prototype des intégrations Unity, pour donner aux développeurs un premier aperçu de ce que le codage pour AR sera comme.

Il s'agit d'une initiative bienvenue mais pas surprenante. Toute nouvelle plateforme vit ou meurt sur la qualité de son contenu de lancement, et le HoloLens ne fera pas exception. Par ailleurs, Microsoft a toujours attaché aux relations avec les développeurs.

Fièvre du prototype

Le HoloLens progresse lentement vers la réalité commerciale. Je maintiens de profondes réserves sur certaines des limitations du matériel, mais l'appareil est indéniablement cool 8 utilisations réelles de Microsoft HoloLensHoloLens de Microsoft est cool, mais pourquoi allez-vous vraiment l'utiliser? Nous déclinons les possibilités les plus excitantes. Lire la suite , et quelque chose comme ça sera un jour très utile. Êtes-vous excité pour le HoloLens?Avez-vous eu l'occasion d'en essayer un lors de la conférence? Vous voulez juste un aquarium virtuel? Faites le nous savoir dans les commentaires!