你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站,请访问 https://docs.azure.cn。
Spark 任务事件。
表属性
属性 | 价值 |
---|---|
资源类型 | microsoft.hdinsight/clusters |
类别 | Azure 资源 |
解决方案 | 日志管理 |
基本日志 | 否 |
引入时间转换 | 是 |
示例查询 | - |
列
列 | 类型 | 说明 |
---|---|---|
ApplicationId | 字符串 | 生成记录的应用程序的应用程序 ID。 |
AttemptId | 字符串 | 任务尝试的 ID。 |
_帐单大小 | 实数 | 记录大小(字节) |
BytesRead | 长整型 | 任务期间读取的字节数。 |
BytesWritten | 长整型 | 任务写入的字节数。 |
集群DNS名称 | 字符串 | 运行任务的群集的 DNS 名称。 |
集群租户ID | 字符串 | 运行任务的群集的租户 ID。 |
DiskBytesSpilled | 长整型 | 溢出的磁盘字节数。 |
EndReason | 字符串 | 任务结束的原因。 |
ExecutorCPUTime | 长整型 | 任务执行程序消耗的 CPU 时间。 |
ExecutorDeserializeCPUTime | 长整型 | 任务执行程序反序列化所用的 CPU 时间。 |
ExecutorDeserializeTime | 长整型 | 任务执行程序反序列化所用的时间。 |
ExecutorId | 字符串 | ID 执行程序。 |
执行器运行时间 | 长整型 | 运行任务执行程序所用的时间。 |
已失败 | 布尔 | 描述任务是否失败的布尔值。 |
完成时间 | 日期/时间 | 任务完成的时间 (UTC)。 |
Host | 字符串 | 运行任务的主机的 FQDN。 |
InputMetrics | 长整型 | 与任务输入关联的指标。 |
IP地址 | 字符串 | 运行任务的节点的 IP 地址。 |
_IsBillable | 字符串 | 指定引入数据是否需要付费。 当 _IsBillable 为 false 时,不会向 Azure 帐户计收引入费 |
JvmGcTime | 长整型 | JVM 垃圾回收所用的时间。 |
被杀 | 布尔 | 描述任务是否被终止的布尔值。 |
LaunchTime | 日期/时间 | 启动任务的时间 (UTC)。 |
MemoryBytesSpilled | 长整型 | 溢出的内存字节数。 |
NumUpdatedBlockStatuses | 长整型 | 任务期间更新的块状态数。 |
OutputMetrics | 长整型 | 与任务输出关联的指标。 |
峰值执行内存 | 长整型 | 执行期间使用的内存峰值量。 |
RecordsRead | 长整型 | 任务期间读取的记录数。 |
RecordsWritten | 长整型 | 任务写入的记录数。 |
区域 | 字符串 | 运行任务的群集的区域。 |
_资源ID | 字符串 | 与记录关联的资源的唯一标识符 |
ResultSerializationTime | 长整型 | 获取结果时所用的序列化时间。 |
ResultSize | 长整型 | 结果的大小。 |
角色 | 字符串 | 运行任务的节点的类型。 |
SchedulerDelay | 长整型 | 计划程序经历的延迟量。 |
ShuffleBytesWritten | 长整型 | 随机任务期间写入的字节数。 |
ShuffleFetchWaitTime | 长整型 | 等待提取所用的时间。 |
ShuffleLocalBlocksFetched | 长整型 | 随机任务期间提取的本地块数。 |
ShuffleReadMetrics | 长整型 | 与随机读取关联的指标。 |
ShuffleRecordsWritten | 长整型 | 随机任务期间写入的记录数。 |
ShuffleRemoteBlocksFetched | 长整型 | 随机任务期间提取的远程块数。 |
ShuffleTotalBlocksFetched | 长整型 | 随机任务期间提取的块数。 |
ShuffleTotalBytesRead | 长整型 | 随机任务期间读取的字节数。 |
ShuffleWriteMetrics | 长整型 | 与随机写入关联的指标。 |
ShuffleWriteTime | 长整型 | 随机任务期间写入所用的时间。 |
SourceSystem | 字符串 | 收集事件的代理的类型。 例如,对于 Windows 代理,可以使用OpsManager 直接连接或 Operations Manager;对于所有 Linux 代理,可以使用Linux ;对于 Azure 诊断,可以使用Azure 。 |
StageId | 字符串 | 与任务关联的阶段的 ID。 |
_SubscriptionId (订阅编号) | 字符串 | 与记录关联的订阅的唯一标识符 |
任务ID | 字符串 | 任务的 ID。 |
任务类型 | 字符串 | 任务类型。 |
租户ID | 字符串 | Log Analytics 工作区 ID |
TimeGenerated | 日期/时间 | 生成日志的时间戳 (UTC)。 |
类型 | 字符串 | 表的名称 |
UpdatedBlocks | 长整型 | 更新的块数。 |
用户订阅ID | 字符串 | 运行任务的群集的订阅 ID。 |