Windows Copilot Runtime Vue d'ensemble
Windows Copilot Runtime est une suite d’outils qui permet aux développeurs de créer des expériences IA sur et pour Windows, notamment de nouvelles façons d’interagir avec le système d’exploitation.
Les Windows Copilot Runtime APIs développeurs d’applications Windows peuvent accéder aux fonctionnalités d’IA s’exécuter localement sur le système d’exploitation, sans avoir à rechercher, exécuter ou optimiser votre propre modèle Machine Learning (ML). Windows Copilot RuntimeAPIs sont ciblés pour la disponibilité dans la version du Kit de développement logiciel (SDK) d’application Windows 1.7 Expérimental 2 prévue pour janvier 2025. En savoir plus sur le Kit de développement logiciel (SDK) d’application Windows.
Phi Silicon est inclus parmi ceux-ci APIs. Un modèle de langage sur appareil créé par Microsoft Research, Phi Silicon offre la plupart des mêmes fonctionnalités trouvées dans les modèles de langage volumineux (LLMs), mais plus compacts et efficaces afin qu’il puisse s’exécuter localement sur Windows.
Text Recognition, ou reconnaissance optique de caractères (OCR), qui reconnaît et extrait le texte présent dans une image, sera disponible en tant qu’API travaillant en alignement avec Phi Silicon.
Recall, fonctionnalité de recherche assistée par l’IA qui rend les activités passées sur votre appareil Windows pouvant faire l’objet d’une recherche, afin que vous puissiez récupérer l’emplacement où vous vous êtes arrêté, que ce soit à l’aide d’une application, en modifiant un document ou en répondant à un e-mail.
Studio Effects Améliore les fonctionnalités de caméra et audio des appareils Windows avec des unités de traitement neuronales compatibles pour appliquer des effets d’arrière-plan alimentés par l’IA, la correction des contacts oculaires, l’encadrement automatique, le focus vocal, le flou, l’éclairage et les filtres créatifs exécutés sur le NPU de l’appareil pour maintenir des vitesses de performances rapides.
Les traductions de sous-titres en direct aident tout le monde sur Windows, y compris ceux qui sont sourds ou malentendants, mieux comprendre l’audio en affichant des sous-titres de contenu parlé, même lorsque le contenu audio est dans une langue différente de la langue préférée du système.
Intégrer vos propres modèles ML
En plus de l’IA, Windows Copilot RuntimeAPIsnous avons des outils et des conseils sur la façon d’améliorer votre application à l’aide de modèles Machine Learning (ML).
AI Toolkit dans Visual Studio Code vous permet d’intégrer vos propres modèles ML à l’aide de frameworks tels que ONNX Runtime, PyTorch ou WebNN, et d’accéder à l’accélération matérielle pour améliorer les performances et l’échelle via DirectML.
En savoir plus :
- Comment les applications Windows peuvent-elles tirer parti des modèles ML ?
- Où puis-je trouver des modèles ML open source sur le web ?
- Comment puis-je optimiser un modèle ML à utiliser dans mon application Windows ?
- Comment puis-je ajuster un modèle ML avec mes propres données personnalisées ?
- Comment puis-je tirer parti de l’accélération matérielle pour améliorer les performances avec les fonctionnalités d’IA ?
Pracitces et exemples d’IA responsable
Développez des applications de manière responsable avec l’IA à l’aide des Windows Copilot Runtime modèles d’INTELLIGENCE artificielle générative sur l’appareil pour aider à appliquer des fonctionnalités de sécurité de contenu locales, telles que les moteurs de classification sur appareil pour le contenu dangereux et une liste de blocs par défaut. Microsoft hiérarchise la prise en charge des développeurs pour créer des expériences IA fiables et fiables avec des modèles locaux sur Windows. Apprenez-en davantage sur les pratiques de développement responsable à appliquer lorsque vous créez des applications et des fonctionnalités assistées par l’IA qui s’exécutent sur des appareils Windows dans le cadre du développement d’applications et de fonctionnalités d’INTELLIGENCE artificielle responsable sur les conseils Windows .
Des ressources supplémentaires pour les développeurs intéressés par les fonctionnalités ou modèles IA intégrés avec votre application Windows incluent :
Galerie d’exemples AI sur Windows : des exemples illustrant des façons d’intégrer l’IA dans les applications Windows.
FAQ sur l’utilisation de l’IA avec Windows : des questions fréquentes sur la terminologie et les concepts liés à l’utilisation de l’IA dans un contexte Windows, couvrant les questions telles que « Qu’est-ce que DirectML ? », « Qu’est-ce que ONNX ? », « Qu’est-ce qu’un NPU ? », « Qu’est-ce qu’un SLM ? », « Qu’est-ce que l’inférence ? », « Qu’est-ce que l’ajustement ? », etc.
Bien démarrer avec les modèles ONNX dans votre application WinUI avec ONNX Runtime