管理 Service Manager 数据仓库

若要管理主要由报告使用的数据仓库，必须对数据仓库作业执行维护任务。 例如，可以查看其状态、暂停和恢复、设置计划、启用和禁用计划以及排查数据仓库作业问题。 可以使用 Windows PowerShell cmdlet 执行所有这些维护任务。 此外，还可以通过 Service Manager 控制台执行其中一些任务。

在部署期间，如 Service Manager 部署指南中的“注册 Service Manager 管理组”中所述，注册了 Service Manager 管理组。 由于该操作，管理包部署已启动，MPSyncJob 启动。 在 MPSyncJob 完成之前，不应启动或恢复任何数据仓库作业，如 Service Manager 控制台中的“数据仓库作业”窗格中所示。

有七个数据仓库作业在各种时间运行以维护数据仓库，如下表所示。

数据仓库作业	说明
MPSyncJob	此作业将同步 Service Manager 源中的所有管理包。 这些管理包定义数据仓库的内容。 注册 Service Manager 管理组后，此作业将立即开始运行，在初始运行时需要几个小时才能完成。
DWMaintenance	此作业执行数据仓库维护，例如索引编制和更新统计信息。 此作业将在 MPSyncJob 完成后自动运行。
实体（或整理）	整理函数通常涉及数据仓库上的活动，这些活动基于可配置的时间段删除数据。 注意： 对于此版本的 Service Manager，整理函数将作为工作流进行处理。 此作业的设置不可配置。
提取	此作业从 Service Manager 数据库中检索数据。 此作业在 Service Manager 数据库中查询自其上次运行以来产生的增量数据，并将此新数据写入到数据仓库内的 DWStagingAndConfig 数据库中。 Service Manager 中有两个提取作业：一个用于 Service Manager 管理组，另一个用于数据仓库管理组。
转换	此作业从临时区域中提取原始数据，并执行将该原始数据转换成用于报表的最终格式所需的任何清除、重格式化以及聚合操作。 此转换的数据被写入到 DWRepository 数据库中。
加载	此作业从 DWRepository 数据库中查询数据并将该数据插入到 DWDatamart 数据库中。 DWDatamart 是用于满足所有最终用户报表需求的数据库。

作业计划和频率

作业的计划定义作业的启动时间。 频率是指作业在启动后运行的频率。 无论计划与频率如何，除非已启用该作业的计划，否则作业不会运行。 除了实体（整理）作业外，每个作业都有默认的计划开始时间，即午夜。 下表列出了计划的开始时间、频率和默认计划设置。

数据仓库作业	计划开始时间	频率	默认情况下是否启用？
MPSyncJob	午夜	每小时	是
DWMaintenance	午夜	每小时	是
提取	午夜	每 5 分钟	是
转换	午夜	每 30 分钟	是
加载	午夜	每小时	是

在此版本的 Service Manager 中，整理函数作为工作流进行处理。 此作业的设置不可配置。

PowerShell cmdlet

Service Manager Windows PowerShell 模块包含在此方案中用于管理托管数据仓库的服务器上的数据仓库函数的 cmdlet。 你必须以管理员身份运行所有 Windows PowerShell cmdlet。 若要查看 Windows PowerShell 帮助，请键入 get-help 命令，后跟要获取帮助的 cmdlet 的名称。 例如，键入 get-help Set-SCDWJobSchedule。 在此方案中使用以下 cmdlet：

• Get-SCDWJobSchedule 显示数据仓库作业的计划。

• Get-SCDWJob 显示所有定期 Service Manager 数据仓库作业的状态。

• Get-SCDWMgmtGroup 显示向数据仓库注册的管理组的详细信息。

• Remove-SCDWMgmtGroup 从数据仓库中删除管理组。

• Set-SCDWJobSchedule 设置数据仓库作业的计划。

• Enable-SCDWJobSchedule 启用数据仓库作业计划。

• Disable-SCDWJobSchedule 禁用数据仓库作业计划。 默认情况下禁用作业计划。

数据仓库作业入门

向 Service Manager 数据仓库注册时，MPSyncJob 将开始运行。 此作业可能需要几个小时才能完成其初始运行。 完成此作业后，可以看到“数据仓库作业”窗格中列出的两个提取作业。 其中一个提取作业列为Extract_data warehouse management 组名称，另一个提取作业将列为Extract_Service Manager 管理组名称。 当这两个提取作业出现时，你知道 MPSyncJob 的初始运行已完成，现在可以继续执行后续维护任务。

数据仓库模块部署

当 Service Manager 管理服务器注册到数据仓库管理服务器时，Service Manager 中的数据仓库模块部署将启动。 下列部分描述模块的组成部分、功能和计划。

管理包同步

管理包同步是数据仓库用以发现源系统中存在哪些类和关系的过程。 此过程也称为 MPSync。 对于定义类或关系的每个管理包，数据仓库都会创建提取作业模块以从对应的数据源中检索该类或关系的数据。 这种管理包及其关联的作业会在系统之间进行同步。

只有密封的管理包及其对应的数据才会被同步到数据仓库中。 如果更改管理包，则必须增加版本号，并且不能引入任何可能导致错误的更改;否则，管理包将无法导入。 例如，不能删除类、删除属性或删除关系。 同样，不能以不支持的方式更改数据类型。 例如，不能修改字符串属性以成为数值属性。

默认情况下，MPSync 业务流程作业运行时间间隔为 30 分钟。

多个源可能引用同一管理包。 源系统中的版本必须与数据仓库中的版本相同或比其高，否则注册将失败。

可以从数据仓库中删除管理包。 不过，请记住下列几点：

1. 删除管理包不会像在 Service Manager 数据库中那样从数据仓库中删除数据;相反，将删除用户向其授予访问权限的数据库视图。

2. 如果在删除相应的管理包后重新导入管理包，则会再次公开历史数据。

   注意

   只有密封的管理包从 Service Manager 同步到数据仓库。 这种情况的一种例外就是列表项，也称为枚举。 无论组或队列位于密封管理包中还是未密封的管理包中，组或队列都会同步到数据仓库。

从 Service Manager 导入的管理包是特定于 Service Manager 的管理包和特定于数据仓库的管理包。 Service Manager 管理包可识别 Service Manager 数据库的结构，数据仓库管理包驱动数据仓库数据库的结构和进程。

报表部署

管理包同步过程从 Service Manager 导入管理包，并定义这些管理包如何塑造结构、移动数据和复制数据仓库和报告的报表。 在 Service Manager 与数据仓库之间同步这些管理包后，将检索数据并部署报表以供用户使用。

报表部署在下列过程中按顺序进行：

1. 所有经过标识的管理包与数据仓库进行同步后，管理包同步会触发报表部署工作流。
2. 由于 DWStagingandConfig 数据库是已同步的管理包的最终目标，因此部署工作流会在 DWStagingandConfig 数据库中查询要部署的任何新的或更改后的报表或要删除的任何报表。
3. 部署工作流随后会通过 SSRS Web 服务向 SQL Server Reporting Services (SSRS) 服务器发布任何新的或更新后的报表。
4. SSRS 存储报表和相应的元数据。
5. 架构部署工作流由管理包同步触发。
6. 系统会根据新同步的并将导致更改的管理包再次从 DWStagingandConfig 数据库中检索导致架构更改的信息。
7. 架构更改会部署到 DWRepository 数据库中。
8. 对 DWStagingandConfig 数据库进行任何必需的提取、转换和加载 (ETL) 模块更改。

仅包含特定于 Service Manager 的信息的管理包不会导致部署活动执行。 它们仅针对新的数据仓库和报表特定的元素触发。

了解 ETL 进程

数据仓库架构和报表部署完毕后，DWDataMart 数据库中会填充实际的数据以用于报表目的。 此操作由 ETL 过程来完成。 下列三个过程都有其各自的特定用途：

• 提取 专门设计用于处理来自多个数据源的大量数据，通过它可将数据移到数据处理专用区域。
• 转换 旨在优化复杂的逻辑和集成操作。 此过程是大部分 ETL 工作出现的位置。
• 加载 旨在以批量方式将已处理过的数据传输到其目标位置。

提供这三种不同数据库的一个主要原因就是为了使你能够更方便地优化硬件环境。 在大容量环境中，DWStagingandConfig 和 DWRepository 数据库所在计算机硬件的读/写 I/O 必须得到优化。 但是，托管 DWDatamart 数据库的计算机硬件的读 I/O 必须得到优化。 记住这种差异，可将 DWDatamart 单独放置在不同于 DWStagingandConfig 和 DWRepository 的服务器或驱动器上。 但是，DWStagingandConfig 和 DWRepository 数据库必须位于同一台服务器上。

在较高级别，下列部分所述的过程中会出现 ETL。 如果你打算创作管理包以用于自定义报表，则可能需要更深入地了解这些过程。

提取

提取过程在计划的时间间隔开始执行。 提取是从联机事务处理系统（OLTP）存储中检索原始数据的过程，在本例中为 Service Manager 数据库。

1. 提取过程会查询 Service Manager 查询自上次运行提取过程以来累积的增量数据。
2. 新数据以与 Service Manager 数据库中相同的基本形式写入 DWStagingandConfig 数据库。

转换

转换过程在计划的时间间隔开始执行。 转换是指从 DWStagingandConfig 数据库中移动原始数据的过程。 它同时也执行将原始数据转换成报表用的最终格式所需的任何清理、重新格式化和聚合操作。 此转换的数据被写入到 DWRepository 数据库中。

加载

加载过程在计划的时间间隔开始执行。 加载过程用于从 DWRepository 数据库中查询数据。 转换后的 DWRepository 数据将被插入到 DWDatamart 数据库中。 DWDatamart 是用于满足所有最终用户报表需求的数据库。

Service Manager 数据仓库保留期

默认情况下，对于事实数据表，数据存储在数据仓库中三年，维度表和异常表的无限期存储。 然而，如果想将数据保留更长时间或者将其更主动地整理出来，可以修改其保持期。

事实数据表保留设置

数据仓库中有两种类型的保留设置：

• 全局：默认情况下，数据库中所有事实数据表的全局保留期设置为三年，随后创建的所有事实数据表都用作其默认保留设置。
• 单个事实：每个事实数据表的精细保留期，使用三年的全局设置，除非单独修改它们。

全局：存储在 Service Manager 数据仓库中的数据的默认全局保留期为三年，因此所有事实数据表都使用三年作为默认保留设置。 任何后续创建的事实数据表在创建时均采用此设置作为其自己的保持期设置。

单个事实数据表：单个事实数据表在创建时继承全局保留值，也可以将其自定义为不同于默认全局设置的值。 可以配置在安装期间创建的默认个别事实数据表，根据需要分别设置其保持期的值。

查看默认表或特定表的保留期

• 使用“Get-SCDWRetentionPeriod” PowerShell cmdlet 可获取特定数据仓库数据库内特定事实数据表的保持期，也可获取数据库内事实数据表的默认保持期。 有关可用参数和示例用法的详细说明，请参阅 Get-SCDWRetentionPeriod。

设置默认表或特定表的保留期

• 使用“Set-SCDWRetentionPeriod” PowerShell cmdlet 可获取特定数据仓库数据库内特定事实数据表的保持期，也可获取数据库内事实数据表的默认保持期。 有关可用参数和示例用法的详细说明，请参阅 Set-SCDWRetentionPeriod。

重新导入以前删除的管理包

在开发和测试包含访问数据仓库信息报表的管理包过程中，你可能需要删除管理包，稍后再将它们重新导入。 但是，在从数据仓库卸载管理包后，如果新管理包包含与原始架构不同的某个架构的相同维、事实数据或多维数据集名称，则你必须手动从 DWRepository 和 DWDataMart 数据库删除维度或事实数据表，并且还从 SQL Server Analysis Services (SSAS) 数据库删除任何引用多维数据集。

此外，如果现有的数据多维数据集引用某个维度或事实数据，则你必须还删除包含该数据多维数据集的管理包和数据多维数据集自身，才能卸载新的管理包。 由于 Service Manager 不会从 DataSourceView 中删除维度或事实数据表，并且不会从 SSAS 数据库中删除维度，因此必须手动删除数据多维数据集引用的信息。 在这种情况下，你应在重新注册或重新安装更新的管理包之前，通过 SQL Server Management Studio 来删除你使用来自 DWASDatabase 的管理包创建的任何自定义的数据多维数据集。

通常而言，你应避免在不同架构中存在相同的维度、事实数据以及多维数据集名称。 Service Manager 不支持此条件。

启用或禁用数据仓库作业计划

使用以下过程根据需要为 ETL 作业启用计划;可以使用此过程为任何数据仓库作业启用计划。 默认情况下，将启用提取、转换和加载（ETL）作业的计划。 在此版本的 Service Manager 中，只能使用 Windows PowerShell 启用计划。

使用 Windows PowerShell cmdlet 为数据仓库作业启用计划

1. 在承载数据仓库管理服务器的计算机上，选择“开始”，指向“所有程序”，选择Microsoft System Center，选择“Service Manager”，然后选择“Service Manager Shell”。

2. 在 Windows PowerShell 提示符下，输入以下命令，然后在每个命令后按 Enter：

   Enable-SCDWJobSchedule -JobName Extract_<data warehouse management group name>
   

   Enable-SCDWJobSchedule -JobName Extract_<Service Manager management group name>
   

   Enable-SCDWJobSchedule -JobName Transform.Common
   

   Enable-SCDWJobSchedule -JobName Load.Common
   

3. 进入 退出，然后按 Enter。

可以使用以下过程来禁用提取、转换和加载 （ETL） 作业的计划;但是，可以使用此过程来禁用任何数据仓库作业的计划。 在此版本的 Service Manager 中，只能使用 Windows PowerShell cmdlet 禁用计划。

使用 Windows PowerShell cmdlet 禁用数据仓库作业的计划

1. 在承载数据仓库管理服务器的计算机上，选择“开始”，指向“所有程序”，选择Microsoft System Center，选择“Service Manager”，然后选择“Service Manager Shell”。

2. 在 Windows PowerShell 提示符下，输入以下命令，并在每个命令后按 Enter：

   Disable-SCDWJobSchedule -JobName Extract_<data warehouse management group name>
   

   Disable-SCDWJobSchedule -JobName Extract_<Service Manager management group name>
   

   Disable-SCDWJobSchedule -JobName Transform.Common
   

   Disable-SCDWJobSchedule -JobName Load.Common
   

3. 进入 退出，然后按 Enter。

停止和启动数据仓库作业

可以停止和启动 Service Manager 中运行的数据仓库作业。 例如，可能需要停止所有正在运行的数据仓库作业，以确保数据仓库管理服务器的安全更新不会干扰任何可能运行的作业。 更新并重启服务器后，可以恢复所有数据仓库作业。 可以使用 Service Manager 控制台或使用 Windows PowerShell cmdlet 停止和启动作业。 在此示例中，仅运行提取、转换和加载 （ETL） 作业。

注意

有关使用 Service Manager Windows PowerShell cmdlet 的信息，请参阅 配置和使用适用于 Windows PowerShell 的 Service Manager Cmdlet。

使用 Service Manager 控制台停止和启动数据仓库作业

1. 在 Service Manager 控制台中，选择 数据仓库。
2. 展开数据仓库，然后选择“数据仓库作业”。
3. 在“数据仓库作业”窗格中，选择正在运行的作业，然后在“任务”列表中选择“挂起”。
4. 对每个数据仓库作业重复上一步。
5. 若要恢复每个作业，请选择在“数据仓库作业”窗格中停止的作业，然后在“任务”列表中选择“恢复”。

使用 Windows PowerShell cmdlet 停止所有数据仓库作业

1. 在承载数据仓库管理服务器的计算机上，选择“开始”，指向“所有程序”，选择Microsoft System Center，选择“Service Manager”，然后选择“Service Manager Shell”。

2. 在 Windows PowerShell 提示符下，输入以下命令，然后在每个命令后按 Enter：

   Stop-SCDWJob-JobName Extract_<data warehouse management group name>
   

   Stop-SCDWJob -JobName Extract_<Service Manager management group name>
   

   Stop-SCDWJob -JobName Transform.Common
   

   Stop-SCDWJob -JobName Load.Common
   

3. 键入 退出，然后按 Enter。

使用 Windows PowerShell cmdlet 启动所有数据仓库作业

1. 在承载数据仓库管理服务器的计算机上，选择“开始”，指向“所有程序”，选择Microsoft System Center，选择“Service Manager”，然后选择“Service Manager Shell”。

2. 在 Windows PowerShell 提示符下，输入以下命令，然后在每个命令后按 Enter：

   Start-SCDWJob -JobName Extract_<data warehouse management group name>
   

   Start-SCDWJob -JobName Extract_<Service Manager management group name>
   

   Start-SCDWJob -JobName Transform.Common
   

   Start-SCDWJob -JobName Load.Common
   

3. 进入 退出，然后按 Enter。

在 Service Manager 中计划数据仓库作业

可以使用以下过程在 Service Manager 中计划数据仓库作业。

可以在 Service Manager 中定义数据仓库作业的计划的情况下使用此过程。 你想要更改数据仓库作业的计划，以定义 Service Manager 数据库和数据仓库的标准维护时段。 使用 Set-SCDWJobSchedule cmdlet 计划数据仓库作业。 cmdlet Set-SCDWJobSchedule -ScheduleType Weekly 和参数组合允许作业仅在指定的日期运行。 例如，以下命令定义每日或每周计划：

Set-SCDWJobSchedule -JobName Transform.Common -ScheduleType Daily -DailyFrequency  01:00:00 -DailyStart 06:00

Set-SCDWJobSchedule -JobName Transform.Common -ScheduleType Weekly -WeeklyFrequency Tuesday, Thursday -WeeklyStart 06:00

注意

若要运行 Windows PowerShell cmdlet，必须将执行策略设置为 RemoteSigned。

在以下过程中，将转换作业的计划配置为每隔 45 分钟运行一次，从上午 2：00 开始。 但是，可以修改命令以设置自己的计划。

为数据仓库作业配置计划

1. 在承载数据仓库管理服务器的计算机上，选择“开始”，指向“所有程序”，选择Microsoft System Center，选择“Service Manager”，然后选择“Service Manager Shell”。

2. 在 Windows PowerShell 提示符下，键入以下命令，然后按 Enter。

   Set-SCDWJobSchedule -JobName Transform.Common -ScheduleType Daily -DailyFrequency 00:45:00 -DailyStart 02:00
   

验证数据仓库作业计划

1. 在承载数据仓库管理服务器的计算机上，选择“开始”，指向“所有程序”，选择Microsoft System Center，选择“Service Manager”，然后选择“Service Manager Shell”。

2. 输入以下命令，然后按 Enter：

   Get-SCDWJobSchedule
   

处理数据仓库中的所有维度

可以使用 Windows PowerShell cmdlet 在一个操作中处理数据仓库中的所有维度，而不是单独处理每个维度。 在托管 SQL Server Analysis Services（SSAS）的服务器上，使用以下 Windows PowerShell 脚本。 确保指定完全限定的服务器名称。 可以单独输入每个命令，也可以将它们全部保存为 Windows PowerShell 脚本 （.ps1） 文件，然后运行脚本。

在使用 Service Manager cmdlet 之前，需要配置 Service Manager Shell。 有关配置 Service Manager Shell 的信息，请参阅 配置和使用适用于 Windows PowerShell 的 System Center - Service Manager Cmdlet。

使用 cmdlet 处理所有维度

• 在 Service Manager Shell 中的提示处复制并粘贴以下代码片段：

  [System.Reflection.Assembly]::LoadWithPartialName("Microsoft.AnalysisServices") > $NULL
  

  $Server = New-Object Microsoft.AnalysisServices.Server
  $Server.Connect("<FullyQualifiedServerName>")
  $Databases = $Server.Databases
  $DWASDB = $Databases["DWASDataBase"]
  $Dimensions = New-Object Microsoft.AnalysisServices.Dimension
  $Dimensions = $DWASDB.Dimensions
  

  foreach ($Dimension in $Dimensions){$Dimension.Process("ProcessFull")}
  

查看数据仓库作业历史记录

数据仓库作业的历史记录是在 Service Manager 中运行时收集的。 可以查看此历史记录以确定作业的运行时间或确定作业上次成功运行的时间。 显示数据仓库作业历史记录时，可以使用 NumberOfBatches 参数显示指定的条目数。 使用以下过程查看数据仓库作业历史记录中的最后五个条目。

查看数据仓库作业历史记录中的最后五个条目

1. 在承载数据仓库管理服务器的计算机上，选择“开始”，指向“所有程序”，选择Microsoft System Center，选择“Service Manager”，然后选择“Service Manager Shell”。

2. 输入以下命令，然后按 Enter。

   Get-SCDWJob -NumberOfBatches 5
   

3. 进入 退出，然后按 Enter。

查看数据仓库作业的状态

可以使用以下过程查看 Service Manager 中数据仓库作业的状态，以确定作业是正在运行、停止还是失败。

使用 Service Manager 控制台查看数据仓库作业的状态

1. 在 Service Manager 控制台中，选择 数据仓库。
2. 在“数据仓库”窗格中，展开数据仓库，然后选择“数据仓库作业”。
3. 在 “数据仓库作业 ”窗格中，查看作业列表以查看其状态。

使用 Windows PowerShell cmdlet 查看数据仓库作业的状态

1. 在承载数据仓库管理服务器的计算机上，选择“开始”，指向“所有程序”，选择Microsoft System Center，选择“Service Manager”，然后选择“Service Manager Shell”。

2. 输入以下命令，然后按 Enter。

   Get-SCDWJob
   

3. 查看作业列表以查看其状态。

对 Service Manager 中的数据仓库作业进行故障排除

在 Service Manager 中，可能会遇到与数据仓库作业相关的问题。 数据仓库注册向导完成后，在 Service Manager 控制台中提供报表后，可以开始运行报表。 例如，如果运行的事件管理报告不显示更新的数据，则可以使用 Windows PowerShell cmdlet 来解决问题。

你可以使用第一个过程确定作业是否无法使用 Windows PowerShell cmdlet，并且可以评估此作业创建的任何错误消息。

第二个过程可用于更改默认转换作业超时期限。 如果看到数据仓库转换作业未成功完成，则这可能是由于超过作业的默认 3 小时超时期限所致。 之所以发生这种情况，是因为数据仓库中转换了大量数据。 若要确认这确实发生了，可以在数据仓库中查看类似于：超时过期的消息的事件查看器。在操作完成之前经过的超时期限或服务器未响应。可查看模块。 例如，你可能会看到上述用于 TransformEntityRelatesToEntityFact 模块的消息。 若要解决此问题，可以将超时期限设置为大于默认值 10800 秒。

使用 Windows PowerShell cmdlet 排查数据仓库作业问题

1. 在承载数据仓库管理服务器的计算机上，启动“Windows PowerShell” 。

2. 输入以下命令，然后按 Enter。

   Get-SCDWJob
   

3. 查看输出，找到状态 为“失败 ”的任何作业。

4. 输入以下命令，然后按 Enter。 在命令中，将失败的数据仓库作业指定为 JobName 参数的值。

   Get-SCDWJobModule -JobName Transform.Common
   

5. 在输出中，找到“失败”状态，然后审阅“错误消息” 列，以获取数据仓库作业失败的原因的详细信息。

6. 准备好重试失败的作业后，在 Service Manager 控制台中选择 “数据仓库”。

7. 展开数据仓库，然后选择“数据仓库作业”。

8. 在“数据仓库作业”窗格中，选择列表中的失败作业，然后在“任务”列表中选择“恢复”。

替代默认超时期限

1. 编辑数据仓库管理服务器上的注册表，并确保软件\Microsoft\System Center\Common\DAL 下的密钥名称 SqlCommandTimeout 存在并且类型为 DWORD。 如果不存在，请创建它。

2. 请用正值编辑此值（以秒为单位）。
3. 重启 Microsoft Monitoring Agent 服务。
4. 你可以重新开始进行 Transform.common 作业，以查看更改。

后续步骤

• 若要从一个或多个数据源检索数据，请参阅 向数据仓库注册源系统。