Overzicht van audiostreaming - audioabonnement
Belangrijk
De functionaliteit die in dit artikel wordt beschreven, is momenteel beschikbaar als openbare preview. Deze preview-versie wordt geleverd zonder een service level agreement en we raden deze niet aan voor productieworkloads. Misschien worden bepaalde functies niet ondersteund of zijn de mogelijkheden ervan beperkt. Zie Aanvullende gebruiksvoorwaarden voor Microsoft Azure-previews voor meer informatie.
Azure Communication Services biedt bidirectionele mogelijkheden voor audiostreaming, waarmee ontwikkelaars krachtige hulpprogramma's kunnen gebruiken voor het vastleggen, analyseren en verwerken van audio-inhoud tijdens actieve oproepen. Deze ontwikkeling maakt de weg vrij voor nieuwe mogelijkheden in realtime communicatie voor zowel ontwikkelaars als bedrijven.
Door bidirectionele audiostreaming te integreren met services zoals Azure OpenAI en andere realtime spraak-API's, kunnen bedrijven naadloze communicatie met lage latentie bereiken. Dit verbetert de ontwikkeling en implementatie van conversationele AI-oplossingen aanzienlijk, waardoor interactie mogelijk wordt.
Met bidirectionele streaming kunnen bedrijven hun spraakoplossingen nu uitbreiden naar ai-agents met een lage latentie, mensenachtige, interactieve conversationele AI. Met onze bidirectionele streaming-API's kunnen ontwikkelaars audio streamen van een doorlopend gesprek op Azure Communication Services naar hun webservers in realtime en audio terug streamen naar het gesprek. Hoewel de eerste focus van deze functies is om bedrijven te helpen gespreks-AI-agents te maken, zijn andere use cases natuurlijke taalverwerking voor gespreksanalyse of het bieden van realtime inzichten en suggesties aan agents terwijl ze in actieve interactie met eindgebruikers zijn.
Deze openbare preview ondersteunt de mogelijkheid voor ontwikkelaars om realtime audiostreams te openen via een WebSocket vanuit Azure Communication Services en audio terug te streamen naar het gesprek.
Realtime hulp bij bellen
Maak gebruik van conversationele AI-oplossingen: ontwikkel geavanceerde virtuele agents voor klantondersteuning die in realtime kunnen communiceren met klanten, met onmiddellijke antwoorden en oplossingen.
Gepersonaliseerde klantervaringen: door gebruik te maken van realtime gegevens, kunnen bedrijven in realtime meer gepersonaliseerde en dynamische klantinteracties aanbieden, wat leidt tot meer tevredenheid en loyaliteit.
Verminder de wachttijden voor klanten: Met bidirectionele audiostreams met LLM's (Large Language Models) kunt u virtuele agents maken die als eerste contactpunt voor klanten fungeren, waardoor de wachttijd voor een menselijke agent wordt verminderd.
Verificatie
- Biometrische verificatie : gebruik de audiostreams om spraakverificatie uit te voeren door de audio van het gesprek uit te voeren via uw spraakherkennings-/matchingengine/hulpprogramma.
Voorbeeldarchitectuur waarin wordt getoond hoe bidirectionele audiostreaming kan worden gebruikt voor conversationele AI-agents
Ondersteunde indelingen
Gemengd
Bevat gemengde audio van alle deelnemers aan het gesprek. Alle audio wordt afgevlakt in één stream.
Onvermengd
Bevat audio per deelnemer per kanaal, met ondersteuning voor maximaal vier kanalen voor de vier meest dominante sprekers op elk moment in een gesprek. U krijgt ook een deelnemerRawID die u kunt gebruiken om de spreker te bepalen.
Aanvullende informatie
Ontwikkelaars kunnen de volgende informatie over audio die vanuit Azure Communication Services wordt verzonden, gebruiken om de audiopakketten te converteren naar hoorbare inhoud voor hun toepassingen.
- Framerate: 50 frames per seconde
- Pakketstroomsnelheid: tarief van 20 ms
- Grootte van gegevenspakket: 640 bytes voor 16.000 hz en 960 bytes voor 24.000 hz
- Metrische audiogegevens: 16-bits PCM mono bij 16.000 hz en 24.000 hz
- Openbare tekenreeksgegevens zijn een base64-tekenreeks die moet worden geconverteerd naar een bytematrix om onbewerkt PCM-bestand te maken.
Billing
Zie de pagina met prijzen van Azure Communication Services voor informatie over hoe audiostreaming wordt gefactureerd. Prijzen vindt u in de categorie bellen onder audiostreaming.
Volgende stappen
Bekijk de quickstart voor audiostreaming voor meer informatie.