Información general de Windows Copilot Runtime
Windows Copilot Runtime ofrece una variedad de características respaldadas por ia y APIs que permiten acceder a la funcionalidad de inteligencia artificial sin necesidad de encontrar, ejecutar o optimizar su propio modelo de Machine Learning (ML). Los modelos que impulsan Windows Copilot Runtime en los PCs con Copilot+ se ejecutan localmente y continuamente en segundo plano.
características de Windows Copilot Runtime y APIs para aplicaciones de Windows
Windows Copilot Runtime incluye las siguientes características y está respaldado por IA APIs (en el SDK de Aplicaciones para Windows) con tecnología de modelos que se ejecutan localmente en el dispositivo Windows.
Sílice Phi: Todavía no está disponible. La sílice Phi APIs se enviará en el SDK de Aplicaciones para Windows. Al igual que el modelo de lenguaje grande (LLM) de GPT de OpenAI que impulsa ChatGPT, Phi es un modelo de lenguaje pequeño (SLM) desarrollado por Microsoft Research para realizar tareas de procesamiento de lenguaje en un dispositivo local. PhiLice está diseñado específicamente para dispositivos Windows con una unidad de procesamiento neuronal (NPU), lo que permite que las características de generación de texto y conversación se ejecuten de forma de alto rendimiento y acelerada por hardware directamente en el dispositivo.
Text Recognition con OCR: Aún no está disponible. El Text RecognitionAPIs (también denominado Reconocimiento óptico de caracteres o OCR) se enviará en la Windows App SDK. Estos APIs permiten el reconocimiento de texto en una imagen y la conversión de diferentes tipos de documentos (como documentos de papel escaneados, archivos PDF o imágenes capturadas por una cámara digital) en datos editables y buscables en un dispositivo local.
Imagenológico APIs: Todavía no está disponible. Las imágenes mejoradas por IA APIs se enviará en el SDK de aplicaciones para Windows. Estos APIs realizan una variedad de acciones, como escalar imágenes de forma inteligente e identificar objetos dentro de las imágenes.
Studio Effects: Disponible en Windows 11, versión 22H2 o posterior (compilación 22623.885+), en PC Copilot+. Los dispositivos Windows con unidades de procesamiento neuronal (NPU) compatibles se integran Studio Effects en la configuración integrada de la cámara y el micrófono del dispositivo. Aplique efectos especiales que utilicen IA, incluidos: Desenfoque de fondo, corrección de contacto visual, encuadre automático, corrección de iluminación en retratos, filtros creativos o enfoque de voz para filtrar el ruido de fondo.
Recall: disponible para la versión preliminar a través del Programa Windows Insider en equipos copilot+.Recall permite a los usuarios encontrar rápidamente cosas de su actividad pasada, como documentos, imágenes, sitios web y mucho más. Los Desarrolladores pueden enriquecer las Recall experiencia con su aplicación al agregar información contextual a la base de datos vectorial subyacente con el API de actividad del usuario. Esta integración ayudará a los usuarios a retomar donde lo dejaron en tu aplicación, mejorando el compromiso con la aplicación y el flujo continuo del usuario entre Windows y tu aplicación.
Traducciones de subtítulos en vivo ayudan a todos los usuarios de Windows, incluidos aquellos que son sordos o con dificultades auditivas, a comprender mejor el audio al ver subtítulos del contenido hablado (incluso cuando el contenido de audio está en un idioma diferente del idioma preferido del sistema).
Integración de sus propios modelos de MACHINE Learning
Además de la inteligencia artificial respaldada Windows Copilot RuntimeAPIs, tenemos herramientas e instrucciones sobre cómo mejorar la aplicación mediante modelos de Machine Learning (ML).
AI Toolkit en Visual Studio Code le permite integrar sus propios modelos de ML mediante marcos como ONNX Runtime, PyTorch o WebNN, y acceder a la aceleración de hardware para mejorar el rendimiento y escalar a través de DirectML.
Más información:
- ¿Cómo pueden las aplicaciones de Windows sacar provecho de los modelos de ML?
- ¿Dónde puedo encontrar modelos de ML de código abierto en la web?
- ¿Cómo puedo optimizar un modelo de ML para usarlo en mi aplicación de Windows?
- ¿Cómo puedo ajustar un modelo de ML con mis propios datos personalizados?
- ¿Cómo puedo sacar provecho de la aceleración de hardware para mejorar el rendimiento con las características de IA?
Prácticas de inteligencia artificial responsable
Desarrollar aplicaciones de forma responsable con la inteligencia artificial mediante Windows Copilot Runtime modelos de inteligencia artificial generativa en dispositivos para ayudar a aplicar características de seguridad de contenido local, como motores de clasificación en dispositivos para contenido dañino y una lista de bloqueo predeterminada. Microsoft da prioridad a los desarrolladores para crear experiencias de inteligencia artificial seguras y de confianza con modelos locales en Windows. Obtenga más información sobre las prácticas de desarrollo responsables que se aplican a medida que crea aplicaciones y características asistidas por IA que se ejecutan en dispositivos Windows en la guía Desarrollo de aplicaciones y características de IA generativas responsables en Windows .
Consulte también
Phi Silica, pequeña pero poderosa SLM en el dispositivo (Blogs de Windows)
IA en la Galería de ejemplos de Windows: ejemplos que muestran formas de integrar la IA en las aplicaciones de Windows.
Preguntas frecuentes sobre el uso de la IA con Windows: preguntas frecuentes sobre terminología y conceptos relacionados con el uso de la IA en el contexto de Windows, abarcan cuestiones como: "¿Qué es DirectML?", "¿Qué es ONNX?", "¿Qué es ORT?", "¿Qué es una NPU?", "¿Qué es un SLM?", "¿Qué es la inferencia?", "¿Qué es ajustar?", etc.
Introducción a los modelos ONNX en su aplicación WinUI con ONNX Runtime