你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站,请访问 https://docs.azure.cn

HDInsightSparkTaskEvents

Spark 任务事件。

表属性

属性 价值
资源类型 microsoft.hdinsight/clusters
类别 Azure 资源
解决方案 日志管理
基本日志
引入时间转换
示例查询 -

类型​​ 说明
ApplicationId 字符串 生成记录的应用程序的应用程序 ID。
AttemptId 字符串 任务尝试的 ID。
_帐单大小 实数 记录大小(字节)
BytesRead 长整型 任务期间读取的字节数。
BytesWritten 长整型 任务写入的字节数。
集群DNS名称 字符串 运行任务的群集的 DNS 名称。
集群租户ID 字符串 运行任务的群集的租户 ID。
DiskBytesSpilled 长整型 溢出的磁盘字节数。
EndReason 字符串 任务结束的原因。
ExecutorCPUTime 长整型 任务执行程序消耗的 CPU 时间。
ExecutorDeserializeCPUTime 长整型 任务执行程序反序列化所用的 CPU 时间。
ExecutorDeserializeTime 长整型 任务执行程序反序列化所用的时间。
ExecutorId 字符串 ID 执行程序。
执行器运行时间 长整型 运行任务执行程序所用的时间。
已失败 布尔 描述任务是否失败的布尔值。
完成时间 日期/时间 任务完成的时间 (UTC)。
Host 字符串 运行任务的主机的 FQDN。
InputMetrics 长整型 与任务输入关联的指标。
IP地址 字符串 运行任务的节点的 IP 地址。
_IsBillable 字符串 指定引入数据是否需要付费。 当 _IsBillable 为 false 时,不会向 Azure 帐户计收引入费
JvmGcTime 长整型 JVM 垃圾回收所用的时间。
被杀 布尔 描述任务是否被终止的布尔值。
LaunchTime 日期/时间 启动任务的时间 (UTC)。
MemoryBytesSpilled 长整型 溢出的内存字节数。
NumUpdatedBlockStatuses 长整型 任务期间更新的块状态数。
OutputMetrics 长整型 与任务输出关联的指标。
峰值执行内存 长整型 执行期间使用的内存峰值量。
RecordsRead 长整型 任务期间读取的记录数。
RecordsWritten 长整型 任务写入的记录数。
区域 字符串 运行任务的群集的区域。
_资源ID 字符串 与记录关联的资源的唯一标识符
ResultSerializationTime 长整型 获取结果时所用的序列化时间。
ResultSize 长整型 结果的大小。
角色 字符串 运行任务的节点的类型。
SchedulerDelay 长整型 计划程序经历的延迟量。
ShuffleBytesWritten 长整型 随机任务期间写入的字节数。
ShuffleFetchWaitTime 长整型 等待提取所用的时间。
ShuffleLocalBlocksFetched 长整型 随机任务期间提取的本地块数。
ShuffleReadMetrics 长整型 与随机读取关联的指标。
ShuffleRecordsWritten 长整型 随机任务期间写入的记录数。
ShuffleRemoteBlocksFetched 长整型 随机任务期间提取的远程块数。
ShuffleTotalBlocksFetched 长整型 随机任务期间提取的块数。
ShuffleTotalBytesRead 长整型 随机任务期间读取的字节数。
ShuffleWriteMetrics 长整型 与随机写入关联的指标。
ShuffleWriteTime 长整型 随机任务期间写入所用的时间。
SourceSystem 字符串 收集事件的代理的类型。 例如,对于 Windows 代理,可以使用OpsManager直接连接或 Operations Manager;对于所有 Linux 代理,可以使用Linux;对于 Azure 诊断,可以使用Azure
StageId 字符串 与任务关联的阶段的 ID。
_SubscriptionId (订阅编号) 字符串 与记录关联的订阅的唯一标识符
任务ID 字符串 任务的 ID。
任务类型 字符串 任务类型。
租户ID 字符串 Log Analytics 工作区 ID
TimeGenerated 日期/时间 生成日志的时间戳 (UTC)。
类型​​ 字符串 表的名称
UpdatedBlocks 长整型 更新的块数。
用户订阅ID 字符串 运行任务的群集的订阅 ID。