Windows Copilot Runtime 概觀
重要
目前不支援未封裝的應用程式。
Windows Copilot Runtime 提供各種透過 APIs提供的 AI 功能,可讓您利用 AI 功能,而不需要尋找、執行或優化您自己的 Machine Learning (ML) 模型。 在 Copilot+ 電腦上驅動 Windows Copilot Runtime 的模型會在本機執行,並持續在背景中運作。
使用 AI 功能時,建議您檢閱:在 Windows上開發負責任的產生式 AI 應用程式和功能。
適用於 Windows 應用程式的 Windows Copilot Runtime 功能和 APIs
Windows Copilot Runtime 包含下列功能和 AI 支援的 APIs(在 Windows App SDK 中),由在 Windows 裝置上本機執行的模型提供。
Phi 矽:Phi 矽 APIs 將在 Windows App SDK中出貨。 與支援 ChatGPT 的 OpenAI 大型語言模型 (LLM) 類似,Phi 是由 Microsoft Research 開發的小型語言模型 (SLM),在本機裝置上執行語言處理工作。 Phi Silica 專為具備神經處理單元(NPU)的 Windows 裝置設計,可讓文字生成和對話功能直接在裝置上以高效能、硬體加速的方式運行。
Text Recognition OCR:Text RecognitionAPIs(也稱為光學字元辨識或 OCR)將在 Windows App SDK中提供。 這些 APIs 可讓您辨識影像中的文字,以及將不同類型的檔(例如掃描的紙張檔、PDF 檔案或數位相機所擷取的影像)轉換成本機裝置上可編輯和可搜尋的數據。
映射處理 APIs:AI 增強的映像處理 APIs 將在 Windows App SDK中提供。 這些 APIs 執行各種動作,例如智慧調整影像,以及識別影像中的物件。
Studio Effects:具有相容類神經處理單元 (NPU) 的 Windows 裝置會將 Studio Effects 整合到內建裝置相機和麥克風設定中。 套用利用 AI 的特殊效果,包括:背景模糊、眼部接觸校正、自動框架、直向光線校正、創意篩選或語音焦點來篩選背景噪音。
Recall:Recall 可讓用戶快速從過去的活動中找到事物,例如文件、圖片、網站等等。 開發人員可以使用 Recall,將情境資訊新增至基礎向量資料庫,以豐富使用者的 體驗。 這項整合可協助使用者挑選他們在應用程式中離開的位置,改善App參與度,以及使用者與App之間的順暢流程。
Live Caption Translations 協助 Windows 上的所有人,包括耳聾或聽障人士,透過檢視口語內容的輔助字幕來進一步瞭解音訊(即使音訊內容與系統慣用的語言不同)。
內容管理:瞭解 Windows Copilot Runtime 如何審查內容,以及如何調整敏感性篩選器。
使用 Windows Copilot RuntimeAPIs 在企業應用程式中整合 AI
觀看示範會議 ,在 2024 年 11 月 Ignite 會議中使用 Windows Copilot RuntimeAPIs 把 AI 整合到企業應用程式中。
其他資源
- 開始在 Windows上使用 AI:Windows Copilot Runtime 實作文字內容審核 API 來標記和篩選出潛在的有害內容。 深入瞭解這項功能,以及如何調整篩選敏感度。
- 在 Windows上開發負責任的生成式 AI 應用程式和功能:關於負責任地開發整合 AI 的應用程式的指引。
- Windows 範例庫上的 AI:示範各種使用 AI 增強 Windows 應用程式的範例集合。