Mode recherche HoloLens

Le mode recherche a été introduit sur les appareils HoloLens (1ère génération) pour donner accès aux capteurs clés, en particulier pour les applications de recherche qui ne sont pas destinées au déploiement. Le mode Recherche pour HoloLens 2 conserve les fonctionnalités de HoloLens 1, mais ajoute l’accès aux flux suivants :

• Caméras de suivi de l’environnement de lumière visible : caméras à l’échelle grise utilisées par le système pour le suivi de la tête et la création de cartes.

• Caméra de profondeur : fonctionne dans deux modes :

  • AHAT, haute fréquence (45 FPS) détection de quasi-profondeur utilisée pour le suivi de la main. Contrairement au mode de courte durée de la première version, AHAT offre une pseudo-profondeur avec un wrap de phase au-delà de 1 mètre.
  • Détection de profondeur longue et basse fréquence (1-5 FPS) utilisée par le mappage spatial

• Deux versions du flux de réflectivité IR : utilisées par l’HoloLens pour calculer la profondeur. Ces images sont illuminées par l’infrarouge et non affectées par la lumière visible ambiante.

Si vous utilisez un HoloLens 2, vous avez également accès aux entrées supplémentaires ci-dessous :

• Accéléromètre : utilisé par le système pour déterminer l’accélération linéaire le long des axes X, Y et Z et de la gravité.
• Gyro : utilisé par le système pour déterminer les rotations.
• Magnétomètre : utilisé par le système pour estimer l’orientation absolue.

Capture de réalité mixte d’une application de test qui affiche les huit flux de capteur disponibles en mode Recherche

Utilisation

Le mode recherche est conçu pour les chercheurs universitaires et industriels qui explorent de nouvelles idées dans les domaines de la Vision par ordinateur et de la robotique. Il n’est pas destiné aux applications déployées dans des environnements d’entreprise ou disponibles via le Microsoft Store ou d’autres canaux de distribution.

En outre, Microsoft ne fournit pas d’assurance que le mode Recherche ou les fonctionnalités équivalentes seront pris en charge dans les futures mises à jour matérielles ou du système d’exploitation. Toutefois, ne laissez pas cela vous empêcher de l’utiliser pour développer et tester de nouvelles idées !

Sécurité et performances

L’activation du mode Recherche utilise plus de batterie que l’utilisation du HoloLens 2 dans des conditions normales, même si l’application utilisant les fonctionnalités du mode Recherche n’est pas en cours d’exécution. L’activation de ce mode peut également réduire la sécurité globale de votre appareil, car les applications peuvent mal utiliser les données du capteur. Vous trouverez plus d’informations sur la sécurité des appareils dans le FAQ sur la sécurité HoloLens.

Prise en charge des appareils

Activation du mode Recherche (HoloLens first Gen et HoloLens 2)

Le mode recherche est une extension du mode développeur. Avant de commencer, les fonctionnalités de développement de l’appareil doivent être activées pour accéder aux paramètres du mode Recherche :

• Ouvrez Paramètres du menu > Démarrer et sélectionnez Mises à jour.
• Sélectionnez Pour les développeurs et activez le mode développeur.
• Faites défiler vers le bas et activez Device Portal.

Une fois les fonctionnalités de développement activées, connectez-vous au portail de l’appareil pour activer les fonctionnalités du mode Recherche :

• Accédez au mode recherche système > dans le portail de l’appareil.
• Sélectionnez Autoriser l’accès au flux de capteur.
• Redémarrez l’appareil à partir de l’élément de menu Alimentation en haut de la page.

Une fois que vous avez redémarré l’appareil, les applications chargées via le portail d’appareil peuvent accéder aux flux en mode Recherche.

Fenêtre Mode recherche dans le portail d’appareil HoloLens

Utilisation des données de capteur dans vos applications

Les applications peuvent accéder aux données de flux de capteur de la même façon que Media Foundation accède aux flux de caméra photo et vidéo.

Toutes les API qui fonctionnent pour le développement HoloLens sont également disponibles en mode Recherche. En particulier, l’application sait précisément où Se trouve HoloLens dans l’espace 6DoF à chaque temps de capture de la trame du capteur.

Nous avons des exemples d’applications montrant l’accès au flux en mode Recherche, à l’aide des intrinsèques et extrinsèques, et des flux d’enregistrement :

• HoloLens (première génération)
• HoloLens 2

Support

Pour HoloLens (première génération), utilisez le suivi des problèmes dans le référentiel HoloLensForCV pour publier des commentaires et suivre les problèmes connus.

Pour HoloLens 2, utilisez le suivi des problèmes dans le référentiel HoloLens2ForCV pour publier des commentaires et suivre les problèmes connus.

Voir aussi

• Microsoft Media Foundation
• Dépôt GitHub HoloLensForCV
• Dépôt GitHub HoloLens2ForCV
• Utilisation du portail d’appareil Windows