HoloLens-Forschungsmodus

Der Forschungsmodus wurde auf HoloLens-Geräten (1. Generation) eingeführt, um Zugriff auf wichtige Sensoren zu ermöglichen, insbesondere für Forschungsanwendungen, die nicht für die Bereitstellung vorgesehen sind. Der Recherchemodus für HoloLens 2 behält die Funktionen von HoloLens 1 bei, fügt jedoch Zugriff auf die folgenden Datenströme hinzu:

• Überwachungskameras für sichtbare Lichtumgebung – Graustufenkameras, die vom System für die Kopfnachverfolgung und kartenbasierte Erstellung verwendet werden.

• Tiefenkamera – Arbeitet in zwei Modi:

  • AHAT, hochfrequente (45 FPS) Nah-Tiefensensorik, die für die Handnachverfolgung verwendet wird. Anders als bei der ersten Version des Kurzwurfmodus gibt AHAT Pseudotiefe mit Phasenumbruch über 1 Meter.
  • Tiefenmessung mit langer Wurftiefe mit niedriger Frequenz (1 bis 5 FPS), die von räumlicher Zuordnung verwendet wird

• Zwei Versionen des IR-Reflektivitätsdatenstroms : Wird von holoLens zum Berechnen der Tiefe verwendet. Diese Bilder werden durch Infrarot beleuchtet und nicht durch das sichtbare Umgebungslicht beeinflusst.

Wenn Sie eine HoloLens 2 verwenden, haben Sie auch Zugriff auf die folgenden zusätzlichen Eingaben:

• Beschleunigungsmesser : Wird vom System verwendet, um die lineare Beschleunigung entlang der X-, Y- und Z-Achse und schwerkraft zu bestimmen.
• Gyro : Wird vom System verwendet, um Drehungen zu bestimmen.
• Magnetometer : Wird vom System verwendet, um die absolute Ausrichtung zu schätzen.

Eine Mixed Reality-Aufnahme einer Testanwendung, die die acht im Forschungsmodus verfügbaren Sensorströme anzeigt

Verwendung

Der Forschungsmodus richtet sich an Wissenschaftler und Industrielle, die neue Ideen in den Bereichen maschinelles Sehen und Robotik erforschen. Es ist nicht für Anwendungen vorgesehen, die in Unternehmensumgebungen bereitgestellt oder über den Microsoft Store oder andere Vertriebskanäle verfügbar sind.

Darüber hinaus bietet Microsoft keine Zusicherungen, dass der Recherchemodus oder gleichwertige Funktionen in zukünftigen Hardware- oder Betriebssystemupdates unterstützt werden. Lassen Sie sich jedoch nicht davon abhalten, es zum Entwickeln und Testen neuer Ideen zu verwenden!

Sicherheit und Leistung

Das Aktivieren des Forschungsmodus verwendet unter normalen Bedingungen mehr Akkuleistung als die verwendung des HoloLens 2, auch wenn die Anwendung, die die Funktionen des Forschungsmodus verwendet, nicht ausgeführt wird. Das Aktivieren dieses Modus kann auch die Allgemeine Sicherheit Ihres Geräts verringern, da Anwendungen Sensordaten missbrauchen können. Weitere Informationen zur Gerätesicherheit finden Sie in den häufig gestellten Fragen zur HoloLens-Sicherheit.

Geräteunterstützung

Aktivieren des Forschungsmodus (HoloLens first Gen und HoloLens 2)

Der Recherchemodus ist eine Erweiterung des Entwicklermodus. Bevor Sie beginnen, müssen die Entwicklerfeatures des Geräts aktiviert werden, um auf die Einstellungen für den Recherchemodus zugreifen zu können:

• Öffnen Sie Die Einstellungen des Startmenüs>, und wählen Sie Updates aus.
• Wählen Sie Für Entwickler aus, und aktivieren Sie den Entwicklermodus.
• Scrollen Sie nach unten, und aktivieren Sie Das Geräteportal.

Nachdem die Entwicklerfeatures aktiviert wurden, stellen Sie eine Verbindung mit dem Geräteportal her , um die Features des Recherchemodus zu aktivieren:

• Wechseln Sie im Geräteportal zum Systemforschungsmodus>.
• Wählen Sie Zugriff auf Sensordatenstrom zulassen aus.
• Starten Sie das Gerät über das Menüelement Ein/ Aus oben auf der Seite neu.

Nachdem Sie das Gerät neu gestartet haben, können die über das Geräteportal geladenen Anwendungen auf Datenströme im Forschungsmodus zugreifen.

Fenster "Recherchemodus" im HoloLens-Geräteportal

Verwenden von Sensordaten in Ihren Apps

Anwendungen können auf die Sensorstreamdaten auf die gleiche Weise zugreifen, wie Media Foundation auf Foto- und Videokamerastreams zugreift.

Alle APIs, die für die HoloLens-Entwicklung funktionieren, sind auch im Forschungsmodus verfügbar. Insbesondere weiß die Anwendung genau, wo sich HoloLens bei jeder Erfassungszeit des Sensorframes im 6DoF-Raum befindet.

Wir haben Beispielanwendungen, die den Datenstromzugriff im Research-Modus unter Verwendung der systeminternen und extrinsischen Funktionen und Aufzeichnungsdatenströme zeigen:

• HoloLens (erste Generation)
• HoloLens 2

Support

Verwenden Sie für HoloLens (erste Generation) den IssueTracker im HoloLensForCV-Repository, um Feedback zu posten und bekannte Probleme nachzuverfolgen.

Verwenden Sie für HoloLens 2 die Problemnachverfolgung im HoloLens2ForCV-Repository, um Feedback zu posten und bekannte Probleme nachzuverfolgen.

Siehe auch

• Microsoft Media Foundation
• HoloLensForCV-GitHub-Repository
• HoloLens2ForCV GitHub-Repository
• Verwenden des Windows-Geräteportals