你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站,请访问 https://docs.azure.cn。
HDInsightSparkTaskEvents
Spark 任务事件。
表属性
Attribute | 值 |
---|---|
资源类型 | microsoft.hdinsight/clusters |
类别 | Azure 资源 |
解决方案 | LogManagement |
基本日志 | 否 |
引入时转换 | 是 |
示例查询 | - |
列
列 | 类型 | 说明 |
---|---|---|
ApplicationId | string | 生成记录的应用程序的应用程序 ID。 |
AttemptId | string | 任务尝试的 ID。 |
_BilledSize | real | 记录大小(字节) |
BytesRead | long | 任务期间读取的字节数。 |
BytesWritten | long | 任务写入的字节数。 |
ClusterDnsName | string | 运行任务的群集的 DNS 名称。 |
ClusterTenantId | string | 运行任务的群集的租户 ID。 |
DiskBytesSpilled | long | 溢出的磁盘字节数。 |
EndReason | string | 任务结束的原因。 |
ExecutorCPUTime | long | 任务执行程序消耗的 CPU 时间。 |
ExecutorDeserializeCPUTime | long | 任务执行程序用于反序列化的 CPU 时间。 |
ExecutorDeserializeTime | long | 任务执行程序用于反序列化的时间。 |
ExecutorId | string | ID 执行程序。 |
ExecutorRunTime | long | 运行任务执行程序所用的时间。 |
已失败 | 布尔 | 描述任务是否失败的布尔值。 |
FinishTime | datetime | 任务完成的时间 (UTC)。 |
主机 | string | 运行任务的主机的 FQDN。 |
InputMetrics | long | 与任务输入关联的指标。 |
IpAddress | string | 运行任务的节点的 IP 地址。 |
_IsBillable | string | 指定引入数据是否计费。 当 _IsBillable 为 false 时,不会向 Azure 帐户计收引入费 |
JvmGcTime | long | JVM 垃圾回收所用的时间。 |
已终止 | 布尔 | 描述任务是否已终止的布尔值。 |
LaunchTime | datetime | 启动任务的时间 (UTC)。 |
MemoryBytesSpilled | long | 溢出的内存字节数。 |
NumUpdatedBlockStatuses | long | 任务期间更新的块状态数。 |
OutputMetrics | long | 与任务输出关联的指标。 |
PeakExecutionMemory | long | 执行期间使用的内存峰值量。 |
RecordsRead | long | 任务期间读取的记录数。 |
RecordsWritten | long | 任务写入的记录数。 |
区域 | string | 运行任务的群集的区域。 |
_ResourceId | 字符串 | 与记录关联的资源的唯一标识符 |
ResultSerializationTime | long | 获取结果时所用的序列化时间。 |
ResultSize | long | 结果的大小。 |
角色 | string | 运行任务的节点的类型。 |
SchedulerDelay | long | 计划程序经历的延迟量。 |
ShuffleBytesWritten | long | 随机任务期间写入的字节数。 |
ShuffleFetchWaitTime | long | 等待提取所用的时间。 |
ShuffleLocalBlocksFetched | long | 随机任务期间提取的本地块数。 |
ShuffleReadMetrics | long | 与随机读取关联的指标。 |
ShuffleRecordsWritten | long | 随机任务期间写入的记录数。 |
ShuffleRemoteBlocksFetched | long | 随机任务期间提取的远程块数。 |
ShuffleTotalBlocksFetched | long | 随机任务期间提取的块数。 |
ShuffleTotalBytesRead | long | 随机任务期间读取的字节数。 |
ShuffleWriteMetrics | long | 与随机写入关联的指标。 |
ShuffleWriteTime | long | 在随机任务期间写入所用的时间。 |
SourceSystem | string | 收集事件的代理的类型。 例如,适用于 Windows 代理的 OpsManager 、直接连接或 Operations Manager、适用于所有 Linux 代理的 Linux 或适用于 Azure 诊断的 Azure |
StageId | string | 与任务关联的阶段的 ID。 |
_SubscriptionId | 字符串 | 与记录关联的订阅的唯一标识符 |
TaskId | string | 任务的 ID。 |
TaskType | string | 任务类型。 |
TenantId | string | Log Analytics 工作区 ID |
TimeGenerated | datetime | 生成日志的时间戳 (UTC)。 |
类型 | 字符串 | 表的名称 |
UpdatedBlocks | long | 更新的块数。 |
UserSubscriptionId | string | 运行任务的群集的订阅 ID。 |