Einleitung

Mit dem Mixed Reality-Toolkit können Sie Eingaben aus verschiedenen Eingabequellen wie Controllern, artikulierten Händen oder Spracheingaben nutzen. Die Auswahl des Interaktionsmodells, das am besten für Ihre Mixed Reality-Erfahrung geeignet ist, erfordert, dass Sie Ihren Benutzer identifizieren, seine Ziele identifizieren und alle situationellen oder Umweltfaktoren berücksichtigen, die sich auf ihre Erfahrung auswirken können.

Angenommen, Sie entwerfen ein Spiel, das viele Interaktionen erfordert. Die Benutzer sind ein bisschen besorgt über die Methode der Interaktion, da es anstrengend sein wird, die Controller über einen langen Zeitraum zu verwenden. Daher müssen Sie alternative Eingabemethoden für den Erfolg Ihrer Anwendung entwickeln.

In diesem Modul erfahren Sie, wie Sie Eye Tracking- und Sprachbefehle mit MRTK mithilfe des Mars Curiosity Rover-Hologrammmodells der NASA integrieren. Hier werden Sie Folgendes tun:

• So aktivieren Sie die Blickverfolgung für HoloLens 2
• Erfahren Sie, wie Sie die Eye Tracking verwenden, um Aktionen auszulösen.
• Erstellen von Sprachbefehlen
• Erfahren Sie, wie Sie Sprachbefehle global und lokal steuern.

Am Ende des Moduls können Sie Ihrem Projekt mithilfe von MRTK Eye Tracking- und Sprachbefehle hinzufügen.

Ein vollständiges Beispiel dieses Lernprogramms finden Sie hier.