你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站,请访问 https://docs.azure.cn

什么是 Azure AI 内容理解(预览版)?

重要

  • Azure AI 内容理解目前处于预览状态。 通过公共预览版,可以提前访问当前处于正在开发状态的功能。
  • 正式发布 (GA) 之前,功能、方法和流程可能会发生更改或具有受限的功能。
  • 有关详细信息,请参阅 Microsoft Azure 预览版补充使用条款

Azure AI 内容理解是基于生成式 AI 的一款新型 Azure AI 服务,旨在将任何类型的内容(文档、图像、视频和音频)处理/引入到用户定义的输出格式。

内容理解提供了一个简化的过程来推理大量的非结构化数据,通过生成可集成到自动化和分析工作流的输出来加速价值实现时间。

显示内容理解概述、流程和工作流的屏幕截图。

为什么使用内容理解来处理?

  • 简化和精简工作流。 Azure AI 内容理解将从各种内容类型中提取内容、结构和见解的过程标准化为一个统一的过程。

  • 简化字段提取。 通过内容理解的字段提取,可以更轻松地从非结构化内容生成结构化输出。 定义一个架构以提取、分类或生成字段值,无需复杂的提示工程

  • 提高准确性。 内容理解使用多个 AI 模型同时分析和交叉验证信息,从而生成更准确、更可靠的结果。

内容理解用例

  • 自动化。 内容理解通过将非结构化内容转换为结构化数据(可集成到各种工作流和应用程序中)来支持自动化方案。 置信度分数可最大程度地减少人工评审并降低成本。 例如,通过从发票中提取字段来自动执行采购和付款流程。

  • 搜索和检索增强生成 (RAG)。 内容理解允许将任何形式的内容引入到搜索索引中。 结构化输出表示形式改进了 RAG 方案的相关性。

  • 分析和报告:内容理解提取的字段输出可增强分析和报告,使企业能够获取有价值的见解,进行更深入的分析,并根据准确的报告做出明智的决策。

应用程序

内容理解的常见应用包括:

应用程序 说明 快速入门
通话后分析 企业和呼叫中心可以从通话记录中生成见解,以跟踪关键 KPI、改进产品体验、生成业务见解、创造差异化客户体验,并更快、更准确地应答查询。 通话后分析快速入门
媒体资产管理 软件和媒体供应商可以使用内容理解从视频中提取更丰富、针对性更强的信息,作为媒体资产管理解决方案。 媒体资产管理快速入门
税务自动化 税务准备公司可以使用内容理解从各种文档生成统一的信息视图,创建全面的纳税申报表。 税务自动化快速入门
图表理解 企业可以使用内容理解自动分析和解释各种类型的图表,从而增强图表理解。 图表理解快速入门

有关更多示例,请参阅快速入门

组件

内容理解组件的屏幕截图。

组件 说明
Analyzer 分析器是内容理解的核心组件。 它允许客户配置内容提取设置和字段提取架构。 配置后,分析器会一致地应用这些设置来处理所有传入数据。
内容提取 通过内容提取,用户可以指定要从传入内容中标识和提取的信息类型。 用户指定的信息包括文本 OCR、布局分析、条形码、表格等选项,允许用户专注于最相关的内容元素。
加载项 内容理解加载项可通过整合添加的元素(如条形码、表格和检测到的人脸)来增强内容提取。
字段提取 字段提取允许用户定义要从输入文件中提取的所需字段的结构和架构。 有关支持的字段类型的完整列表,请参阅服务限制。 字段可以通过以下方法之一生成:

提取:直接提取值,按照它们显示在输入内容中的方式,例如收据中的日期或发票中的项目详细信息。

分类:对预定义类别集中的内容进行分类,例如通话情绪或图表类型。

生成:从输入数据自由地生成值,例如汇总音频对话或从视频创建场景描述。
接地源 内容理解可标识从中生成值的内容中的特定区域。 源接地允许用户在自动化方案中快速验证字段值的正确性,从而提高提取的数据的置信度。
置信度分数 内容理解提供 0 到 1 的置信度分数,以估计结果的可靠性。 高分表示准确的数据提取,可在自动化工作流中实现直通式处理。

负责任 AI

Azure AI 内容理解的设计可防范有害内容的处理。 有关详细信息,请参阅我们的透明度说明行为准则

数据隐私和安全性

使用内容理解服务的开发人员应查看 Microsoft 有关客户数据的政策。 有关详细信息,请访问我们的数据、保护和隐私页面。

重要

如果使用 Microsoft 产品或服务处理生物特征数据,你需要负责以下事项:(i) 向数据主体提供通知,包括有关保留期和销毁的通知;(ii) 从数据主体处获得同意;(iii) 根据适用的数据保护要求删除生物特征数据。 “生物特征数据”将具有 GDPR 第 4 条中所述的含义,以及其他数据保护要求中的等效术语(如果适用)。 如需相关信息,请参阅人脸的数据和隐私

入门

我们的快速入门指南可帮助你快速开始使用内容理解服务: