Inledning
I den här modulen skapar vi ett Mixed Reality-program som utforskar användningen av Azure Speech Services med HoloLens. Azure Speech Services är enandet av tal till text, text till tal och talöversättning till en enda Azure-prenumeration.
Föreställ dig ett scenario där du förväntas skapa ett program som kan översätta ditt tal till andra språk. Du vill ha en kort översikt över hur du införlivar den funktionen i ditt program, och Azure Speech Services kan tillhandahålla det.
När den här modulen är klar kan vi använda enhetens mikrofon för att transkribera tal till text i realtid. Dessutom kommer vi att kunna översätta vårt tal till andra språk och använda funktionen Avsiktsigenkänning för att förstå röstkommandon med hjälp av artificiell intelligens.
Du kan hitta ett slutfört exempel på denna handledning här.
Utbildningsmål
- Lär dig hur du integrerar Azure Speech Services med ett HoloLens 2-program
- Lär dig hur du använder taligenkänning för att transkribera text
- Lär dig hur Azure-taligenkänning kan användas för att köra kommandon
- Lär dig hur du integrerar Azure-talöversättning
- Lär dig hur du konfigurerar avsikter, entiteter och yttranden i Language Studio-portalen
- Lär dig hur du implementerar avsikt och förståelse för naturligt språk i vårt program
Förutsättningar
- En Windows 10-dator som konfigurerats med de rätta verktygen.
- Windows 10 SDK 10.0.18362.0 eller senare.
- Unity Hub med Unity 2021.3 eller senare installerat och byggstödsmodulen för universell Windows-plattform har lagts till.
- Konfigurera ett mixed reality-projekt i Unity-modulen.
- Funktionsverktyg för mixad verklighet.