Microsoft Fabric 中的湖屋是什么?
Microsoft Fabric Lakehouse 是一个数据体系结构平台,用于在单个位置存储、管理和分析结构化和非结构化数据。 它是一种灵活且可缩放的解决方案,允许组织使用各种工具和框架处理大量数据,以处理和分析这些数据。 它与其他数据管理和分析工具集成,为数据工程和分析提供全面的解决方案。 Lakehouse 将 Data Lake 的可伸缩性与数据仓库的性能和结构相结合,为数据存储、管理和分析提供统一的平台。
Lakehouse SQL 分析端点
Lakehouse 通过在创建过程中自动生成 SQL 分析终结点和默认语义模型来创建服务层。 通过这种新的透视功能,用户能够直接在湖中的 Delta 表上工作,从而从数据引入到报告,全程提供顺畅且高性能的体验。
请务必注意,SQL 分析终结点 是只读体验,不支持事务数据仓库的完整 T-SQL 外围区域。
注意
只有 Delta 格式的表在 SQL 分析终结点中可用。 无法使用 SQL 分析终结点查询 Parquet、CSV 和其他格式。 如果未看到表,则需要将其转换为 Delta 格式。
自动表发现和注册
自动表发现和注册是 Lakehouse 的一项功能,为数据工程师和数据科学家提供从文件到表的完全托管体验。 可以将文件拖放到 Lakehouse 的托管区域中,并且系统会自动验证它是否支持结构化格式,并将其注册到元存储中,其中包含所需的元数据,例如列名、格式、压缩等。 (目前唯一支持的格式是 Delta 表。然后,可以将文件引用为表,并使用 SparkSQL 语法与数据交互。
与湖屋项交互
数据工程师可以通过多种方式与湖屋和湖屋中的数据进行交互:
湖屋探险家:探险家是湖屋的主要交互页面。 可在湖屋中加载数据,使用对象资源管理器浏览湖屋中的数据,还可设置 MIP 标签和其他各种内容。 详细了解资源管理器体验:导航 Fabric 湖屋资源管理器。
笔记本:数据工程师可以使用笔记本编写代码,以表和/或文件夹的形式直接读取、转换和写入 Lakehouse。 可以详细了解如何使用 Lakehouse 的笔记本:使用笔记本 浏览 Lakehouse 中的数据,如何使用笔记本将数据加载到 lakehouse。
管道:数据工程师可以使用数据集成工具(例如管道复制工具)从其他源拉取数据并将其放入湖屋。 查找有关如何使用复制活动的详细信息:如何使用复制活动复制数据。
Apache Spark 作业定义:数据工程师可以开发可靠的应用程序,并在 Java、Scala 和 Python 中协调已编译的 Spark 作业的执行。 详细了解 Spark 作业:什么是 Apache Spark 作业定义?
数据流第 2 代:数据工程师可以使用数据流第 2 代引入和准备其数据。 查找有关使用数据流加载数据的详细信息:创建第一个数据流以获取和转换数据。
详细了解将数据加载到湖屋的不同方法:将数据引入 Fabric 湖屋的选项。
使用湖屋进行多任务
多任务体验提供了一种浏览器选项卡设计,可让你在多个项之间无缝打开和切换,从而比以往更高效地管理 Data Lakehouse。 不必在不同窗口之间疲于奔波,也不会丢失任务跟踪。 Lakehouse 提供了增强的多任务体验,使数据管理之旅尽可能高效且用户友好,并具有以下功能:
保持正在运行的操作: 您可以在一个选项卡中上传或运行数据加载操作,并在另一个选项卡中检查其它任务。通过增强的多任务处理,在选项卡之间导航时,不会取消正在运行的操作。 你可以专注于你的工作,而不会中断。
保留上下文:在选项卡之间切换时, 所选对象、数据表或文件将保持打开状态并随时可用。 数据湖屋的上下文始终触手可及。
非阻塞列表重载: 文件和表列表的非阻塞重新加载方法。 列表在后台刷新时,你可以继续工作。 它可确保你拥有最新的数据,同时为你提供流畅和不间断的体验。
定义明确的通知:Toast 通知会指定它们来自哪个湖屋,便于更轻松地跟踪多任务环境中的更改和更新。
无障碍湖畔别墅设计
辅助功能一直是确保 Lakehouse 对所有人具有包容性且用户友好的首要任务。 以下是我们迄今为支持辅助功能而实施的关键举措:
屏幕阅读器兼容性: 你可以与常用屏幕阅读器无缝协作,使视觉障碍的用户能够有效地导航和与平台交互。
文本重排 适应不同屏幕大小和方向的响应式设计。 文本和内容动态重排,让用户更轻松地在各种设备上查看和交互应用程序。
键盘导航: 改进的键盘导航,允许用户在不依赖鼠标的情况下在湖屋中移动,从而增强运动障碍者的体验。
图像的可选文字: 所有图像现在都包含描述性的替换文字,使屏幕阅读器能够传达有意义的信息。
窗体字段和标签: 所有表单字段都具有关联的标签,从而简化每个人的数据输入,包括使用屏幕阅读器的数据输入。
相关内容
在本概述中,你对湖屋有了基本的了解。 请继续查看下一篇文章,了解如何创建和使用自己的湖屋:
- 若要开始使用湖屋,请参阅在 Microsoft Fabric 中创建湖屋。