Suivi des mains

Le suivi des mains utilise les caméras orientées vers l'extérieur du casque et des modèles d'apprentissage automatique pour reconnaître vos mains et estimer la position de chaque articulation des doigts en temps réel. Vos mains virtuelles suivent alors vos mains réelles, et des gestes simples agissent comme des commandes.

Gestes courants

• Pincement du pouce et de l'index pour sélectionner, comme un clic de souris.
• Pincement et glissement pour faire défiler ou déplacer des fenêtres.
• Appui sur les boutons virtuels et les claviers directement.
• Saisie d'objets en fermant votre main autour d'eux dans les applications compatibles.

Où cela fonctionne bien, et où cela ne fonctionne pas

Le suivi des mains est excellent pour les menus, les médias, la navigation, les applications sociales et les jeux décontractés, et il permet à un casque d'être plus facile à prendre en main. Il est moins adapté aux jeux d'action rapide : il n'y a pas de boutons ni de gâchettes, il n'y a pas de retour haptique, et le suivi peut être perdu lorsque les mains se chevauchent, quittent le champ de vision des caméras ou que la pièce est sombre.

Appareils

L'Apple Vision Pro est conçu autour du suivi des mains et du suivi des yeux sans contrôleurs dans la boîte. Le Meta Quest 3, le Samsung Galaxy XR et la PICO 4 Ultra prennent en charge à la fois les mains et les contrôleurs. La PlayStation VR2 s'appuie plutôt sur ses contrôleurs Sense.