Panoramica di Windows Copilot Runtime
Importante
Le app non in pacchetto non sono attualmente supportate.
Windows Copilot Runtime offre un'ampia gamma di funzionalità basate sull'intelligenza artificiale disponibili tramite APIs, consentendo di usare le funzionalità di intelligenza artificiale senza la necessità di trovare, eseguire o ottimizzare il proprio modello di Machine Learning (ML). I modelli che alimentano Windows Copilot Runtime nei PC Copilot+ vengono eseguiti in locale e continuamente in background.
Quando si usano le funzionalità di intelligenza artificiale, è consigliabile esaminare: Sviluppo di applicazioni e funzionalità di intelligenza artificiale responsabile in Windows.
Windows Copilot Runtime funzionalità e APIs per le app di Windows
Windows Copilot Runtime include le funzionalità seguenti e i APIs supportati dall'intelligenza artificiale (nel Windows App SDK) basati su modelli eseguiti localmente nel dispositivo Windows.
Phi Silica: il Phi Silica APIs verrà fornito nel Windows App SDK . Analogamente a GPT Large Language Model (LLM) di OpenAI che supporta ChatGPT, Phi è un modello SLM (Small Language Model) sviluppato da Microsoft Research per eseguire attività di elaborazione del linguaggio in un dispositivo locale. Phi Silica è progettato appositamente per i dispositivi Windows con un'unità di elaborazione neurale (NPU), consentendo l'esecuzione delle funzionalità di generazione di testo e conversazione in modo rapido e a prestazioni elevate direttamente sul dispositivo.
Text Recognition conOCR: il Text RecognitionAPIs (detto anche Riconoscimento ottico dei caratteri o OCR) verrà fornito nel Windows App SDK. Queste APIs consentono il riconoscimento del testo in un'immagine e la conversione di diversi tipi di documenti (ad esempio documenti cartacei digitalizzati, file PDF o immagini acquisiti da una fotocamera digitale) in dati modificabili e ricercabili in un dispositivo locale.
Imaging APIs: L'imaging avanzato migliorato dall'intelligenza artificiale APIs verrà fornito nel Windows App SDK . Questi APIs eseguono diverse azioni, come il ridimensionamento intelligente delle immagini e l'identificazione di oggetti all'interno delle immagini.
Studio Effects: i dispositivi Windows con unità di elaborazione neurale compatibili integrano Studio Effects nelle impostazioni predefinite della fotocamera del dispositivo e del microfono. Applicare effetti speciali che utilizzano l'intelligenza artificiale, tra cui: Sfocatura dello sfondo, Correzione automatica dei contatti oculari, Correzione verticale della luce verticale, Filtri creativi o Stato attivo vocale per filtrare il rumore di fondo.
Recall: Recall consente agli utenti di trovare rapidamente elementi dall'attività precedente, ad esempio documenti, immagini, siti Web e altro ancora. Gli sviluppatori possono arricchire l'esperienza Recall dell'utente con la loro app, aggiungendo informazioni contestuali al database vettoriale sottostante tramite l'API Attività Utente . Questa integrazione consentirà agli utenti di riprendere la posizione in cui sono rimasti nell'app, migliorando l'engagement delle app e il flusso facile dell'utente tra Windows e l'app.
Live Caption Translations aiutano tutti gli utenti di Windows, inclusi coloro che sono sordi o ipoacusici, a comprendere meglio l'audio visualizzando sottotitoli di contenuto parlato (anche quando il contenuto audio è in una lingua diversa dalla lingua preferita del sistema).
moderazione dei contenuti: informazioni su come Windows Copilot Runtime modera il contenuto e come modificare i filtri di sensibilità.
Integrare l'intelligenza artificiale nelle app aziendali usando Windows Copilot RuntimeAPIs
Guarda la sessione demo della conferenza Ignite di novembre 2024 per integrare l'IA nelle app aziendali usando Windows Copilot RuntimeAPIs.
Risorse aggiuntive
- Introduzione all'intelligenza artificiale in Windows: Windows Copilot Runtime implementa un'API Moderazione contenuto di testo per contrassegnare e filtrare contenuti potenzialmente dannosi. Ulteriori informazioni su questa funzionalità e su come modificare la sensibilità del filtro.
- Lo sviluppo di applicazioni e funzionalità di intelligenza artificiale generative responsabili in Windows: linee guida per lo sviluppo responsabile di app che incorporano l'intelligenza artificiale.
- IA nella raccolta di esempi di Windows: raccolta di esempi che illustrano diversi modi per migliorare le app di Windows usando l'intelligenza artificiale.