Delen via

overzicht van Windows Copilot Runtime

  • Artikel

Windows Copilot Runtime biedt verschillende ai-functies en APIs waarmee u gebruik kunt maken van AI-functionaliteit zonder dat u uw eigen Machine Learning-model (ML) hoeft te zoeken, uit te voeren of te optimaliseren. De modellen die Windows Copilot Runtime op Copilot+-pc's gebruiken, worden altijd lokaal en op de achtergrond uitgevoerd.

Windows Copilot Runtime functies en APIs voor Windows-apps

Windows Copilot Runtime bevat de volgende functies en door AI ondersteunde APIs (in de Windows App SDK) mogelijk gemaakt door modellen die lokaal op het Windows-apparaat worden uitgevoerd.

  • Phi Silicium: Nog niet beschikbaar. De PhiSilium-APIs wordt verzonden in de Windows App SDK-. Net als bij GPT Large Language Model (LLM) van OpenAI waarmee ChatGPT wordt ingeschakeld, is Phi een SLM (Small Language Model) ontwikkeld door Microsoft Research om taalverwerkingstaken uit te voeren op een lokaal apparaat. Phi Silica is speciaal ontworpen voor Windows-apparaten met een Neural Processing Unit (NPU), waardoor tekstgeneratie- en gespreksfuncties direct op het apparaat kunnen draaien met hoge prestaties en hardwareversnelling.

  • Text Recognition met OCR-: nog niet beschikbaar. De Text RecognitionAPIs (ook wel optische tekenherkenning of OCR genoemd) wordt verzonden in de Windows App SDK-. Deze APIs de herkenning van tekst in een afbeelding en de conversie van verschillende typen documenten (zoals gescande papieren documenten, PDF-bestanden of afbeeldingen die zijn vastgelegd door een digitale camera) in bewerkbare en doorzoekbare gegevens op een lokaal apparaat mogelijk maken.

  • Imaging APIs: Nog niet beschikbaar. De AI-verbeterde beeldvorming APIs wordt geleverd in de Windows App SDK. Deze APIs verschillende acties uitvoeren, zoals het intelligent schalen van afbeeldingen en het identificeren van objecten in afbeeldingen.

  • Studio Effects: beschikbaar in Windows 11, versie 22H2 of hoger (build 22623.885+), op Copilot+ pc's. Windows-apparaten met compatibele neurale verwerkingseenheden (NPU's) integreren Studio Effects in de ingebouwde camera- en microfooninstellingen van het apparaat. Pas speciale effecten toe die gebruikmaken van AI, waaronder: Achtergrondvervaging, Oogcontactcorrectie, Automatisch kaderen, Portretlichtcorrectie, creatieve filters, of Stemfocus voor het filteren van achtergrondgeluiden.

  • Recall: Beschikbaar voor preview via het Windows Insiders-programma op Copilot+-pc's.Recall stelt gebruikers in staat om snel dingen te vinden uit hun eerdere activiteiten, zoals documenten, afbeeldingen, websites en meer. Ontwikkelaars kunnen de Recall ervaring van de gebruiker verrijken met hun app door contextuele informatie toe te voegen aan de onderliggende vectordatabase met de Gebruikersactiviteit-API. Deze integratie helpt gebruikers om op te halen waar ze gebleven waren in uw app, waardoor de betrokkenheid van apps en de naadloze stroom van gebruikers tussen Windows en uw app wordt verbeterd.

  • Live Caption Translations iedereen in Windows helpen, inclusief degenen die doof of slechthorend zijn, beter inzicht te krijgen in audio door bijschriften van gesproken inhoud te bekijken (zelfs als de audio-inhoud zich in een andere taal bevindt dan de voorkeurstaal van het systeem).

Integreer uw eigen ML-modellen

Naast de door AI ondersteunde Windows Copilot RuntimeAPIshebben we hulpprogramma's en richtlijnen voor het verbeteren van uw app met behulp van Machine Learning-modellen (ML).

AI Toolkit in Visual Studio Code kunt u uw eigen ML-modellen integreren met behulp van frameworks zoals ONNX Runtime, PyTorch of WebNN, en toegang krijgen tot hardwareversnelling voor betere prestaties en schaal via DirectML-.

Meer informatie:

Verantwoorde AI-procedures

Apps op verantwoorde wijze ontwikkelen met AI- met behulp van Windows Copilot Runtime generatieve AI-modellen op apparaten om lokale beveiligingsfuncties voor inhoud af te dwingen, zoals classificatie-engines op apparaten voor schadelijke inhoud en een standaardblokkeringslijst. Microsoft geeft prioriteit aan ondersteunende ontwikkelaars voor het bouwen van veilige, betrouwbare AI-ervaringen met lokale modellen in Windows. Meer informatie over verantwoorde ontwikkelpraktijken die u kunt toepassen bij het maken van toepassingen en AI-ondersteunde functies die worden uitgevoerd op Windows-apparaten in de Richtlijnen voor het ontwikkelen van verantwoorde generatieve AI-toepassingen en functies op Windows.

Zie ook