Wprowadzenie
W tym module utworzymy aplikację rzeczywistości mieszanej, która eksploruje korzystanie z usług Azure Speech Services za pomocą urządzenia HoloLens. Usługi Azure Speech Services to zjednoczenie zamiany mowy na tekst, zamiany tekstu na mowę i tłumaczenia mowy na jedną subskrypcję platformy Azure.
Wyobraź sobie scenariusz, w którym oczekujesz, że utworzysz aplikację, która będzie mogła przetłumaczyć mowę na inne języki. Warto zapoznać się z krótkim omówieniem włączenia tej funkcji w aplikacji, a usługi Azure Speech Services mogą to zapewnić.
Po ukończeniu tego modułu będziemy mogli używać mikrofonu urządzenia do transkrypcji mowy na tekst w czasie rzeczywistym. Ponadto będziemy mogli przetłumaczyć naszą mowę na inne języki i użyć funkcji rozpoznawania intencji w celu zrozumienia poleceń głosowych przy użyciu sztucznej inteligencji.
Przykład ukończenia tego samouczka można znaleźć tutaj.
Cele nauki
- Dowiedz się, jak zintegrować usługi Azure Speech Services z aplikacją HoloLens 2
- Dowiedz się, jak używać rozpoznawania mowy do transkrypcji tekstu
- Dowiedz się, jak rozpoznawanie mowy platformy Azure może służyć do wykonywania poleceń
- Dowiedz się, jak zintegrować tłumaczenie mowy platformy Azure
- Dowiedz się, jak skonfigurować intencje, jednostki i wypowiedzi w portalu Language Studio
- Dowiedz się, jak zaimplementować intencję i interpretację języka naturalnego w naszej aplikacji
Warunki wstępne
- Komputer z systemem Windows 10 skonfigurowany za pomocą odpowiednich narzędzi.
- Windows 10 SDK 10.0.18362.0 lub nowszy.
- Usługa Unity Hub z zainstalowanym programem Unity 2021.3 lub nowszym oraz dodanym modułem obsługi kompilacji platformy uniwersalnej systemu Windows.
- Skonfiguruj projekt rzeczywistości mieszanej w module Unity.
- Narzędzie rzeczywistości mieszanej.