列存储索引的新增功能
适用于：
SQL ServerAzure SQL 数据库Azure SQL 托管实例Azure Synapse AnalyticsAnalytics Platform System (PDW)Microsoft Fabric SQL 数据库
了解可用于每个版本的 SQL Server 的列存储功能，以及 SQL 数据库、Azure Synapse Analytics 和 Analytics Platform System (PDW) 的最新版本。
产品发布功能概要
此表概述了列存储索引的主要功能以及提供这些功能的产品。
| 列存储索引功能 | SQL Server 2012 (11.x) | SQL Server 2014 (12.x) | SQL Server 2016 (13.x)1 | SQL Server 2017 (14.x) | SQL Server 2019 (15.x) | SQL Server 2022 (16.x) | Azure SQL 数据库2 和 Azure SQL 托管实例AUTD | Azure Synapse Analytics 专用 SQL 池 |
|---|---|---|---|---|---|---|---|---|
| 多线程查询的批处理模式执行3 | 是 | 是 | 是 | 是 | 是 | 是 | 是 | 是 |
| 单线程查询的批模式执行 | 是 | 是 | 是 | 是 | 是 | 是 | ||
| 存档压缩选项 | 是 | 是 | 是 | 是 | 是 | 是 | 是 | |
| 快照隔离和读取提交快照隔离 | 是 | 是 | 是 | 是 | 是 | 是 | ||
| 创建表时，请指定列存储索引 | 是 | 是 | 是 | 是 | 是 | 是 | ||
| Always On 支持列存储索引 | 是 | 是 | 是 | 是 | 是 | 是 | 是 | 是 |
| Always On 可读次要副本支持只读非聚集列存储索引 | 是 | 是 | 是 | 是 | 是 | 是 | 是 | 是 |
| Always On 可读次要副本支持可更新列存储索引 | 是 | 是 | 是 | 是 | ||||
| 堆或 B 树上的只读非聚集列存储索引 | 是 | 是 | 是 4 | 是 4 | 是 4 | 是 4 | 是 4 | 是 4 |
| 堆或 B 树上的可更新非聚集列存储索引 | 是 | 是 | 是 | 是 | 是 | 是 | ||
| 允许在使用非聚集列存储索引的堆或 B 树上实施额外的 B 树索引 | 是 | 是 | 是 | 是 | 是 | 是 | 是 | 是 |
| 可更新的聚集列存储索引 | 是 | 是 | 是 | 是 | 是 | 是 | 是 | |
| 基于聚集列存储索引的 B 树索引 | 是 | 是 | 是 | 是 | 是 | 是 | ||
| 基于内存优化表的列存储索引 | 是 | 是 | 是 | 是 | 是 | 是 | ||
| 非聚集列存储索引定义支持使用筛选条件 | 是 | 是 | 是 | 是 | 是 | 是 | ||
CREATE TABLE 和 ALTER TABLE 中的列存储索引的压缩延迟选项 |
是 | 是 | 是 | 是 | 是 | 是 | ||
| 支持 nvarchar(max) 类型 | 是 | 是 | 是 | 是 | 否 5 | |||
| 列存储索引具有一个非持久化计算列 | 是 | 是 | 是 | |||||
| 元组移动器背景合并支持 | 是 | 是 | 是 | 是 | ||||
| 有序聚集列存储索引 | 是 | 是 | 是 | |||||
| 有序非聚集列存储索引 | 是 | |||||||
| 联机创建和重新生成列存储索引 | 是 | 是 | ||||||
| 联机有序列存储索引创建和重新生成 | 是 |
1 对于 SQL Server 2016 （13.x） SP1 及更高版本，列存储索引在所有版本中都可用。 对于 SQL Server 2016 （13.x） 和早期版本，列存储索引仅在 Enterprise Edition 中可用。
2 对于 Azure SQL 数据库，列存储索引可在 DTU 高级层、DTU 标准层 - S3 及更高层以及所有 vCore 层中使用。
3批处理模式 操作在 SQL Server Standard Edition 中的并行度限制为 2，而在 SQL Server Web 和 Express Editions 中限制为 1。 此限制是指在基于磁盘的表和内存优化表上创建的列存储索引。
4 若要创建只读非聚集列存储索引，请将索引存储在只读文件组上。
5 专用 SQL 池不支持，但在无服务器 SQL 池中受支持。
AUTD 适用于使用 Always-up-to-date 更新策略配置的 Azure SQL 托管实例。
SQL Server 2022 (16.x)
SQL Server 2022 （16.x） 添加了以下功能：
- 有序聚集列存储索引可提高基于有序列谓词的查询性能。 有序列存储索引可以通过完全跳过数据段来提高性能。 这可以大幅减少完成列存储数据查询所需的 IO。 有关详细信息，请参阅区段消除。 有关详细信息，请参阅 CREATE COLUMNSTORE INDEX 和使用有序列存储索引进行性能优化。
- 使用聚集列存储行组消除字符串的谓词下推使用边界值来优化字符串搜索。 所有列存储索引都受益于按数据类型增强的段消除。 从 SQL Server 2022 (16.x) 开始，这些段消除功能扩展到字符串、二进制和 GUID 数据类型，以及大于 2 的刻度的 datetimeoffset 数据类型。 以前，列存储段消除仅适用于数字、日期和时间数据类型，以及刻度小于或等于 2 的 datetimeoffset 数据类型。 升级到支持字符串 min/max 段消除的 SQL Server 版本（SQL Server 2022（16.x）及更高版本后，列存储索引在使用
ALTER INDEX REBUILD或CREATE INDEX WITH (DROP_EXISTING = ON)重新生成之前，不会受益于此功能。 LIKE谓词前缀的列存储行组消除，例如column LIKE 'string%'。 对于LIKE的非前缀用法（例如column LIKE '%string'），不支持段消除。- 有关添加的功能的详细信息，请参阅 SQL Server 2022 中的新增功能。
SQL Server 2019 (15.x)
SQL Server 2019 (15.x) 添加了这些新功能：
功能
从 SQL Server 2019 (15.x) 开始，元组发动机通过后台合并任务获得帮助，该任务会自动压缩较小的已存在一段时间（由内部阈值确定）的 OPEN 增量行组，或者合并已从中删除大量行的 COMPRESSED 行组。 以前，需要索引重新组织操作才能将行组与部分删除的数据合并。 随着时间的推移，这会提高列存储索引的质量。
SQL Server 2017 (14.x)
SQL Server 2017 (14.x) 添加了这些新功能。
功能
- SQL Server 2017 (14.x) 支持聚集列存储索引中的非持久化计算列。 聚集列存储索引不支持持久化计算列。 无法在计算列上创建非聚集列存储索引。
SQL Server 2016 (13.x)
SQL Server 2016 (13.x) 添加了重要的增强功能，目的是改进列存储索引的性能和灵活性。 这些改进功能可以增强数据仓库方案的效果，并实现实时运营分析。
功能
一个行存储表可以有一个可更新的非聚集列存储索引。 以前，非聚集列存储索引是只读的。
非聚集列存储索引定义支持使用筛选的条件。 若要尽量减少在 OLTP 表中添加列存储索引的性能影响，请使用筛选条件，以便创建仅关于运行工作负荷冷数据的非聚集列存储索引。
一个内存中表可以有一个列存储索引。 你可以在创建表时创建它，也可以稍后使用 ALTER TABLE (Transact-SQL) 来添加。 以前，仅基于磁盘的表可以有列存储索引。
聚集列存储索引可以有一个或多个非聚集行存储索引。 以前，列存储索引不支持非聚集索引。 SQL Server 自动维护 DML 操作的非聚集索引。
支持主键和外键，即可通过使用 B 树索引在聚集列存储索引上强制实施这些约束。
列存储索引有一个压缩延迟选项，该选项可以最大限度地减少事务工作负荷对实时运营分析的影响。 此选项允许通过频繁地更改行来保持稳定，然后再将这些行压缩到列存储中。 有关详细信息，请参阅 CREATE COLUMNSTORE INDEX (Transact-SQL) 和开始使用列存储进行实时运营分析。
数据库兼容级别 120 或 130 的性能
列存储索引支持读提交快照隔离级别 (RCSI) 和快照隔离 (SI)。 这样可以在无锁的情况下进行事务一致性分析查询。
列存储支持索引碎片整理，即可以移除已删除的行而无需显式重新生成索引。
ALTER INDEX ... REORGANIZE语句将根据内部定义的策略，以联机操作的方式从列存储移除已删除的行可在 Always On 可读次要副本上访问列存储索引。 可将分析查询分流到 Always On 次要副本，从而改进运营分析的性能。
聚合下推会在表扫描期间计算聚合函数
MIN、MAX、SUM、COUNT和AVG，前提是数据类型不超过 8 个字节的长度，且不是字符串数据类型。 无论有没有GROUP BY子句，聚合列存储索引和非聚合列存储索引都支持聚合下推。 在 SQL Server 上，此增强功能专用于企业版。使用字符串谓词下推技术可以加速对 VARCHAR/CHAR 或 NVARCHAR/NCHAR 类型字符串的比较查询。 这适用于常用的比较运算符，包括
LIKE等使用位图筛选器的运算符。 这适用于所有支持的排序规则。 在 SQL Server 上，此增强功能专用于企业版。利用基于矢量的硬件功能增强批处理模式操作。 数据库引擎会检测 AVX 2（高级矢量扩展）和 SSE 4（流式处理 SIMD 扩展 4）硬件扩展的 CPU 支持级别，并使用它们（若支持）。 在 SQL Server 上，此增强功能专用于企业版。
数据库兼容级别 130 的性能
对于使用任何下述操作的查询，新提供了批处理模式执行支持：
SORT- 具有多个不同功能的聚合体。 一些示例：
COUNT/COUNT、AVG/SUM、CHECKSUM_AGG、STDEV/STDEVP - 窗口聚合函数：
COUNT、COUNT_BIG、SUM、AVG、MIN、MAX和CLR - 窗口用户定义聚合：
CHECKSUM_AGG、STDEV、STDEVP、VAR、VARP和GROUPING - 窗口聚合分析函数：
LAG、LEAD、FIRST_VALUE、LAST_VALUE、PERCENTILE_CONT、PERCENTILE_DISC、CUME_DIST和PERCENT_RANK
在
MAXDOP 1下运行或使用串行查询计划的单线程查询将在批处理模式下执行。 以前，仅多线程查询以批处理执行的方式运行。无论在访问行存储还是列存储索引的数据时，内存优化的表查询都可以在 SQL 互操作模式下具有并行计划。
可支持性
以下系统视图对列存储来说是新的：
以下内存中 OLTP 式 DMV 包含列存储的更新：
限制
- 对于内存中表，列存储索引必须包括所有列；列存储索引不能有经过筛选的条件。
- 对于内存中表，对列存储索引的查询仅在互作模式下运行，而不是在本机编译模式下运行。 支持并行执行。
已知问题
适用于： SQL Server、Azure SQL 托管实例
- 目前，压缩列存储段中的 LOB 列（varbinary（max）、varchar（max）和 nvarchar（max）不受
DBCC SHRINKDATABASE和DBCC SHRINKFILE的影响。
SQL Server 2014 (12.x)
SQL Server 2014 (12.x) 引入了聚集列存储索引作为主存储格式。 这样就可以进行常规加载以及更新、删除和插入操作。
- 表可以使用聚集列存储索引作为主表存储。 不允许在表上使用其他索引，但可对聚集列存储索引进行更新，因此可执行常规加载并对各个行进行更改。
- 非聚集列存储索引的功能仍与 SQL Server 2012 (11.x) 中的一样，区别是增加了能够以批处理模式执行的运算符。 该索引仍然不能进行更新，只能重新生成和使用分区切换。 非聚集列存储索引只能用于基于磁盘的表，不能用于内存中表。
- 聚集和非聚集列存储索引有一个存档压缩选项，允许进一步压缩数据。 存档选项用于减少内存中数据和磁盘上数据的大小，但会降低查询执行速度。 它适用于访问不频繁的数据。
- 聚集列存储索引和非聚集列存储索引的作用方式非常类似：使用相同的列存储格式、相同的查询处理引擎，以及相同的动态管理视图集。 不同之处在于主索引与次索引类型的区别，非聚集列存储索引是只读的。
- 对于多线程查询来说，以下运算符以批处理模式运行：scan、filter、project、join、group by 和 union all。
SQL Server 2012 (11.x)
SQL Server 2012 (11.x) 引入了非聚集列存储索引作为另一基于行存储表的索引类型，并为基于列存储数据的查询引入了批处理。
- 一个行存储表可以有一个非聚集列存储索引。
- 列存储索引是只读的。 创建列存储索引以后，不能通过
INSERT、DELETE和UPDATE操作来更新表；要执行这些操作，必须在删除索引后更新表，然后重新生成列存储索引。 可以使用分区切换将其他数据加载到表中。 分区切换的优点是，你可以在不删除和重新生成列存储索引的情况下加载数据。 - 列存储索引始终需要额外的存储空间，通常需要在行存储的基础上再多出 10%，因为它会存储数据的副本。
- 批处理的查询性能会翻倍，或者说批处理会改善查询性能，但这仅适用于并行执行查询的情况。