Le Vision Pro n'a pas de contrôleurs. Au lieu de cela, vous vous fierez à divers gestes de la main pour contrôler le casque. Vous pouvez tout apprendre à leur sujet ici.
Le Vision Pro change le paradigme de la façon dont les gens naviguent et interagissent avec les logiciels en réalité mixte. Au lieu d'exiger des contrôleurs physiques maladroits, le casque AR/VR d'Apple s'appuie sur des mécanismes d'entrée sophistiqués avec lesquels nous sommes tous nés - nos mains et nos yeux.
Effectuez des sélections, faites défiler, zoomez, faites pivoter, déplacez des éléments et bien plus simplement en regardant les éléments et en effectuant des gestes de la main simples rappelant le Multi-Touch sur l'iPhone.
Suivez-nous pour explorer les six gestes de la main de base utilisés dans visionOS et découvrez comment votre regard et vos mains rendent l'utilisation de l'ordinateur spatial d'Apple transparente et sans effort.
Comment fonctionnent les gestes de la main de Vision Pro?
Les gestes de la main dans visionOS fonctionnent en tandem avec le suivi des yeux. Vos yeux fournissent le ciblage et l'intention, et les gestes déclenchent des actions spécifiques.
Les fonctionnalités de Vision Pro des caméras frontales, latérales et inférieures pour le suivi des mains, et des capteurs infrarouges à l'intérieur du casque suivent vos yeux.Vous regardez un élément à l'écran, comme un bouton, pour le mettre en surbrillance ou maintenez votre regard pour développer le menu contextuel sous-jacent ou révéler une info-bulle. Une fois la sélection effectuée, effectuez un geste comme un pincement pour agir dessus. Parce que les caméras externes couvrent un large champ de vision, vous pouvez effectuer des gestes tout en posant confortablement votre main sur vos genoux pour éviter les tensions.
Apple a décrit six types courants de gestes de la main pour visionOS dans un Conférence des développeurs de la WWDC23 sur la conception des interactions main-œil pour l'entrée spatiale. Associés aux yeux pour le ciblage, ces gestes de la main vous permettent de contrôler les applications et les interactions sur l'ensemble du système.
Robinet
Le fait de pincer vos doigts effectuera l'action par défaut sur l'élément sélectionné. Pensez à pincer en appuyant sur l'écran de l'iPhone ou en cliquant sur la souris ou le trackpad de votre Mac. Certaines fonctionnalités de visionOS, telles que la frappe aérienne sur le clavier virtuel, ne nécessitent pas le geste de toucher.
Tapez deux fois
Pincez votre pouce et votre index ensemble deux fois de suite pour effectuer l'équivalent du geste de double pression dans les systèmes d'exploitation tactiles comme iOS et iPadOS.
Pincez et maintenez
Rapprochez votre pouce et votre index et maintenez-les momentanément pour déclencher ce geste. Pincer et maintenir dans visionOS fonctionne de la même manière que la pression longue (appuyez et maintenez) geste sur votre iPhone pour surligner du texte ou faire apparaître le menu contextuel.
Déplacez vos doigts pincés pour déplacer les fenêtres et autres éléments de l'interface utilisateur dans visionOS. Si Safari est devant vous, vous pouvez également tenir votre main en l'air et simplement faire défiler votre doigt.
Pincez et faites glisser
Le geste de pincement et de glissement est utilisé pour le défilement. Il vous suffit de joindre vos doigts et d'agiter votre poignet. Vous pouvez faire défiler vers le haut, le bas, la gauche ou la droite en faisant glisser votre main dans n'importe quelle direction.
Plus vite vous déplacez votre main, plus vite vous défilerez. Vous pouvez faire défiler des pages Web dans Safari, des e-mails dans Mail, des documents dans Pages, des feuilles de calcul dans Excel, etc. Vous pouvez utiliser le geste de pincement et de glissement pour faire défiler le contenu dans n'importe quelle fenêtre de visionOS qui prend en charge le défilement.
Zoom
Pour zoomer dans Safari, Photos et d'autres applications, pincez le pouce et l'index des deux mains ensemble, puis déplacez-les vers l'extérieur. Vous pouvez utiliser ce geste pour rapprocher ou éloigner une fenêtre de visionOS, agrandir des images, etc. Dans l'application Photos, vous pouvez regarder une partie spécifique d'une image lorsque vous effectuez le geste de zoom pour zoomer dessus.
Tourner
Pour faire pivoter un élément, pincez vos doigts avec les deux mains rapprochées, puis déplacez une main vers le haut et l'autre vers le bas. Vous pouvez utiliser ce geste pour faire pivoter des objets 3D dans Quick Look, des images dans l'application Photos, des illustrations dans des documents, etc.
Le suivi des yeux et des mains "fonctionne tout simplement" sur le Vision Pro
Comme sur l'iPhone, Apple fournit un langage gestuel de base pour naviguer dans l'intégralité de l'interface utilisateur visionOS et des applications de réalité augmentée. Les développeurs tiers peuvent tirer parti des API officielles d'Apple pour visionOS afin de créer et d'ajouter des entrées gestuelles à leurs applications.
Apple ne recommande pas de créer des gestes personnalisés qui entrent en conflit avec ceux du système ou ceux qui ne sont pas faciles à comprendre, à exécuter ou à mémoriser.
Le suivi des yeux et des mains dans les applications de réalité virtuelle, augmentée et mixte n'est pas une nouveauté. Cependant, le casque Vision Pro implémente ces fonctionnalités à la manière de la marque Apple. Par conséquent, la navigation dans visionOS avec vos yeux et vos mains est transparente et sans effort.
