Wprowadzenie

Zestaw narzędzi Mixed Reality Toolkit pozwala na korzystanie z danych wejściowych z różnych źródeł, takich jak kontrolery, ruchome ręce lub komendy głosowe. Wybranie modelu interakcji najlepiej dopasowanego do doświadczenia rzeczywistości mieszanej wymaga zidentyfikowania użytkownika i jego celów oraz rozważenia wszelkich czynników sytuacyjnych lub środowiskowych, które mogą mieć wpływ na ich doświadczenie.

Załóżmy, że projektujesz grę, która wymaga wielu interakcji. Użytkownicy są nieco zaniepokojeni metodą interakcji, ponieważ będzie to męczące korzystanie z kontrolerów w długim okresie. W związku z tym należy wymyślić alternatywne metody wprowadzania danych wejściowych dla powodzenia aplikacji.

W tym module pokazano, jak zintegrować polecenia śledzenia oczu i głosu z zestawem MRTK przy użyciu modelu hologramu Mars Curiosity Rover NASA. W tym miejscu wykonasz następujące czynności:

• Jak włączyć śledzenie oczu dla urządzenia HoloLens 2.
• Dowiedz się, jak wyzwalać akcję za pomocą śledzenia oczu.
• Jak tworzyć polecenia mowy.
• Dowiedz się, jak kontrolować polecenia mowy globalnie i lokalnie.

Po zakończeniu modułu możesz dodać do projektu polecenia śledzenia oczu i głosu przy użyciu zestawu narzędzi MRTK.

Przykład ukończonego tego samouczka można znaleźć tutaj.