弹性 MapReduce Impala 监控指标-EMR on CVM 操作指南-文档中心-腾讯云

注意
 Impala 指标目前仅支持 Impala3.4.0 及以上版本。
Impala-CATALOG
标题 
指标名称
指标单位
指标含义 
常驻内存集
RSS
bytes
常驻内存集
JVM 内存
MemHeapInitM
MB
JVM 初始 HeapMemory 的数量峰值
﻿
MemHeapCommittedM
MB
JVM 当前已经提交的 HeapMemory 的数量
﻿
MemHeapMaxM
MB
JVM 配置的 HeapMemory 的数量
﻿
MemHeapUsedM
MB
JVM 当前已经使用的 HeapMemory 的数量
﻿
MemNonHeapInitM
MB
JVM 初始 NonHeapMemory的数量
﻿
MemNonHeapCommittedM
MB
JVM 当前已经提交的 NonHeapMemory 的数量
﻿
MemNonHeapUsedM
MB
JVM 当前已经使用的 NonHeapMemory 的数量
堆内存使率
MemHeapUsedRate
%
JVM 当前已经使用的 HeapMemory 的数量所占 JVM 配置的 HeapMemory 的数量的百分比
守护进程到 StateStore 的心跳间隔
Last
s
守护进程到 StateStore 的最近心跳间隔
﻿
Max
s
守护进程到 StateStore 的最大心跳间隔
﻿
Mean
s
守护进程到 StateStore 的平均心跳间隔
﻿
Min
s
守护进程到 StateStore 的最小心跳间隔
﻿
Stddev
s
守护进程到 StateStore 的心跳之间的标准偏差
TCMALLOC 内存
Used
bytes
程序使用的字节数
﻿
PageheapFreeBytes
bytes
页堆中空闲映射页的字节数
﻿
PageheapUnmappedBytes
bytes
页堆中空闲、未映射页的字节数
﻿
PhysicalBytesReserved
bytes
计算进程使用的物理内存量
﻿
TotalBytesReserved
bytes
TCMalloc 保留的系统内存字节数
活跃连接数
Thrift_Server_Connections_Used
个
活跃连接数
进程运行时间
Uptime
s
进程运行时间
文件描述符数
MaxFileDescriptorCount
个
最大文件描述符数
﻿
OpenFileDescriptorCount
个
已打开文件描述符数
线程数
ThreadCount
个
总线程数量
﻿
DaemonThreadCount
个
Daemon 线程数
CPU 利用率
SystemCpuLoad
个
系统 CPU 利用率
Impala-STATESTORE
标题 
指标名称
指标单位
指标含义 
常驻内存集
RSS
bytes
常驻内存集
TCMALLOC 内存
Used
bytes
程序使用的字节数
﻿
PageheapFreeBytes
bytes
页堆中空闲映射页的字节数
﻿
PageheapUnmappedBytes
bytes
页堆中空闲、未映射页的字节数
﻿
PhysicalBytesReserved
bytes
计算进程使用的物理内存量
﻿
TotalBytesReserved
bytes
TCMalloc 保留的系统内存字节数
连接数
Used
个
活跃连接数
运行线程数
Count
个
运行线程数
StateStore 订阅者数量
Count
个
StateStore 订阅者数量
Impala-DAEMON
标题 
指标名称
指标单位
指标含义 
JVM 内存
MemHeapInitM
MB
JVM 初始 HeapMemory 的数量峰值
﻿
MemHeapCommittedM
MB
JVM 当前已经提交的 HeapMemory 的数量
﻿
MemHeapMaxM
MB
JVM 配置的 HeapMemory 的数量
﻿
MemHeapUsedM
MB
JVM 当前已经使用的 HeapMemory 的数量
﻿
MemNonHeapInitM
MB
JVM 初始 NonHeapMemory的数量
﻿
MemNonHeapCommittedM
MB
JVM 当前已经提交的 NonHeapMemory 的数量
﻿
MemNonHeapUsedM
MB
JVM 当前已经使用的 NonHeapMemory 的数量
堆内存使率
MemHeapUsedRate
%
JVM 当前已经使用的 HeapMemory 的数量所占 JVM 配置的 HeapMemory 的数量的百分比
TCMALLOC 内存
Used
bytes
程序使用的字节数
﻿
PageheapFreeBytes
bytes
页堆中空闲映射页的字节数
﻿
PageheapUnmappedBytes
bytes
页堆中空闲、未映射页的字节数
﻿
PhysicalBytesReserved
bytes
计算进程使用的物理内存量
﻿
TotalBytesReserved
bytes
TCMalloc 保留的系统内存字节数
线程数
ThreadCount
个
总线程数量
﻿
DaemonThreadCount
个
Daemon 线程数
进程运行时间
Uptime
s
进程运行时间
文件描述符数
MaxFileDescriptorCount
个
最大文件描述符数
﻿
OpenFileDescriptorCount
个
已打开文件描述符数
CPU 利用率
SystemCpuLoad
个
系统 CPU 利用率
Beeswax API 客户端连接数
Use
个
活跃 Beeswax API 连接数
﻿
Conn_In_Use
个
与此 Impala Daemon 的活跃 Beeswax API 连接数
﻿
TotalConns
个
与此 Impala Daemon 的活跃 Beeswax API 连接总数
﻿
ConnSetupQueueSize
个
此 Impala Daemon 已被接收并等待建立连接的 Beeswax API 连接数
HS2 API 客户端连接数
Use
个
活跃 HS2 API 连接数
﻿
Conn_In_Use
个
活跃 HS2 API 连接数
﻿
TotalConns
个
此 Impala Daemon 在生命周期内建立连接的 HS2 API 连接总数
﻿
ConnSetupQueueSize
个
此 Impala Daemon 已被接收并等待建立连接的 HS2 API 连接数
线程管理器
RunningThreads
个
运行线程数
﻿
TotalCreatedThreads
个
生命周期内创建的线程数
内存管理器限制
Limit
Bytes
超过其内存限制的内存量(默认值-1)
超过其内存限制的内存量(默认值-1)
OverLimit
Bytes
生命周期内创建的线程数
HS2 API 客户端等待建立连接时间
P20
us
HS2 API 客户端等待建立连接时间
﻿
﻿
﻿
P50
﻿
﻿
﻿
P70
﻿
﻿
﻿
P90
﻿
﻿
﻿
P95
﻿
﻿
﻿
P99.9
Beeswax API 客户端等待服务线程建立时间
P20
us
Beeswax API 客户端等待服务线程建立时间
﻿
﻿
﻿
P50
﻿
﻿
﻿
P70
﻿
﻿
﻿
P90
﻿
﻿
﻿
P95
﻿
﻿
﻿
P99.9
已超时的 Beeswax API 连接数
TimeOutCnncRequests
个
已超时的 Beeswax API 连接数
解析请求池请求所花费时间(毫秒)
Total
ms
解析请求池请求所花费时间(毫秒)
外部数据源缓存类中缓存未命中数
Misses
个
外部数据源缓存类中缓存未命中数
已超时等待设置的 Impala 后端服务器的连接请求数
ConnSetupQueueSize
个
已超时等待设置的 Impala 后端服务器的连接请求数
已超时等待设置的 Impala be 的连接请求数
TimeOutCnncRequests
个
已超时等待设置的 Impala be 的连接请求数
与此 Impala 守护程序建立的 Impala 后端客户端连接总数
TotalConnections
个
与此 Impala 守护程序建立的 Impala 后端客户端连接总数
Impala be 的客户端等待连接建立所花费的时间
P20
us
Impala be 的客户端等待连接建立所花费的时间
﻿
﻿
﻿
P50
﻿
﻿
﻿
P70
﻿
﻿
﻿
P90
﻿
﻿
﻿
P95
﻿
﻿
﻿
P99.9
﻿
﻿
﻿
Count
﻿
﻿
﻿
Sum
Impala be 的客户端等待服务线程所花费的时间
P20
us
Impala be 的客户端等待服务线程所花费的时间
﻿
﻿
﻿
P50
﻿
﻿
﻿
P70
﻿
﻿
﻿
P90
﻿
﻿
﻿
P95
﻿
﻿
﻿
P99.9
﻿
﻿
﻿
Count
﻿
﻿
﻿
Sum
HS2 API 客户端等待服务线程建立时间
P20
us
HS2 API 客户端等待服务线程建立时间
﻿
﻿
﻿
P50
﻿
﻿
﻿
P70
﻿
﻿
﻿
P90
﻿
﻿
﻿
P95
﻿
﻿
﻿
P99.9
﻿
﻿
﻿
Count
﻿
﻿
﻿
Sum
HS2 HTTP API 客户端等待服务线程时间
P20
us
HS2 HTTP API 客户端等待服务线程时间
﻿
﻿
﻿
P50
﻿
﻿
﻿
P70
﻿
﻿
﻿
P90
﻿
﻿
﻿
P95
﻿
﻿
﻿
P99.9
﻿
﻿
﻿
Count
﻿
﻿
﻿
Sum
DataStreamService：服务队列溢被拒绝数
RpcsQueueOverflow
个
DataStreamService：服务队列溢被拒绝数
ControlStreamService：服务队列溢被拒绝数
RpcsQueueOverflow
个
ControlStreamService：服务队列溢被拒绝数
DataStreamService：使用字节数
PeakUsageBytes
Bytes
Memtracker DataStreamService 峰值使用字节数
﻿
CurrentUsageBytes
Bytes
Memtracker DataStreamService 当前使用字节数
ControlService：使用字节数
PeakUsageBytes
Bytes
Memtracker ControlService 峰值使用字节数
﻿
CurrentUsageBytes
Bytes
Memtracker ControlService 当前使用字节数
此进程的驻留集大小（RSS）
RSS
Bytes
此进程的驻留集大小（RSS）
StateStore 中注册后端总数
Total
个
StateStore 中注册后端总数
查询延迟分布
P20
us
查询延迟分布
﻿
﻿
﻿
P50
﻿
﻿
﻿
P70
﻿
﻿
﻿
P90
﻿
﻿
﻿
P95
﻿
﻿
﻿
P99.9
﻿
﻿
﻿
Count
﻿
﻿
﻿
Sum
打开已进行写入 HDFS 文件数
NumFilesOpenForInsert
个
打开 HDFS 文件数
进程生命周期内读取的扫描范围
ScanRangesTotal
个
进程生命周期内读取扫描范围
打开 Beeswax 会话数量
NumOpenBeeswaxSessions
个
打开 Beeswax 会话数量
进程生命周期内处理查询 fragment 总数
NumFragments
个
进程生命周期内处理查询 fragment 总数
在无 volum 元数据的进程生命周期内读取的扫描范围总数
ScanRangesNumMissingVolumId
个
在无 volum 元数据的进程生命周期内读取的扫描范围总数
Hedged reads 尝试次数
HedgedReadOps
个
Hedged reads 尝试次数
在进程生命周期内处理查询总数
NumQueries
个
在进程生命周期内处理查询总数
支持缓存 HS2 FETCH_FIRST 的总行数
ResultSetCacheTotalNumRows
个
缓存已支持 HS2 FETCH_FIRST 总行数
此 Impala 服务器上注册的查询总数
NumQueriesRegistered
个
此 Impala 服务器上注册查询总数
be 查询总数
NumQueriesExecuted
个
be 查询总数
非活动状态而终止会话数
NumSessionsExpired
个
非活动状态而终止会话数
非活动状态而终止查询数
NumQueriesExpired
个
非活动状态而终止查询数
打开 HS2会话数
NumOpenHS2Sessions
个
打开 HS2会话数
Catalog 里面表数量
NumTables
个
Catalog tables 数量
Catalog 里面数据库数量
NumDatabases
个
Catalog Databases 数量
IO 管理器写入磁盘的字节数
BytesWritten
个
IO 管理器写入磁盘的字节数
IO 管理器打开的文件数
NumOpenFiles
个
IO 管理器打开的文件数
使用的 HDFS 文件句柄数
NumFileHandlesOutstanding
Bytes
使用的 HDFS 文件句柄数
读取的本地字节数
LocalBytesRead
Bytes
IO 管理器读取的本地字节数
be 查询速率
RateQueriesExecuted
count/s
be 执行的查询速率
处理查询速率
RateQuery
count/s
处理的查询速率
处理查询 fragment 速率
RateFragments
count/s
处理的查询 fragment 速率
﻿

标题	指标名称	指标单位	指标含义
常驻内存集	RSS	bytes	常驻内存集
JVM 内存	MemHeapInitM	MB	JVM 初始 HeapMemory 的数量峰值
		MemHeapCommittedM	MB	JVM 当前已经提交的 HeapMemory 的数量
		MemHeapMaxM	MB	JVM 配置的 HeapMemory 的数量
		MemHeapUsedM	MB	JVM 当前已经使用的 HeapMemory 的数量
		MemNonHeapInitM	MB	JVM 初始 NonHeapMemory的数量
		MemNonHeapCommittedM	MB	JVM 当前已经提交的 NonHeapMemory 的数量
		MemNonHeapUsedM	MB	JVM 当前已经使用的 NonHeapMemory 的数量
堆内存使率	MemHeapUsedRate	%	JVM 当前已经使用的 HeapMemory 的数量所占 JVM 配置的 HeapMemory 的数量的百分比
守护进程到 StateStore 的心跳间隔	Last	s	守护进程到 StateStore 的最近心跳间隔
		Max	s	守护进程到 StateStore 的最大心跳间隔
		Mean	s	守护进程到 StateStore 的平均心跳间隔
		Min	s	守护进程到 StateStore 的最小心跳间隔
		Stddev	s	守护进程到 StateStore 的心跳之间的标准偏差
TCMALLOC 内存	Used	bytes	程序使用的字节数
		PageheapFreeBytes	bytes	页堆中空闲映射页的字节数
		PageheapUnmappedBytes	bytes	页堆中空闲、未映射页的字节数
		PhysicalBytesReserved	bytes	计算进程使用的物理内存量
		TotalBytesReserved	bytes	TCMalloc 保留的系统内存字节数
活跃连接数	Thrift_Server_Connections_Used	个	活跃连接数
进程运行时间	Uptime	s	进程运行时间
文件描述符数	MaxFileDescriptorCount	个	最大文件描述符数
文件描述符数		OpenFileDescriptorCount	个	已打开文件描述符数
线程数	ThreadCount	个	总线程数量
线程数		DaemonThreadCount	个	Daemon 线程数
CPU 利用率	SystemCpuLoad	个	系统 CPU 利用率

Impala 监控指标

本页目录：

Impala-CATALOG

Impala-STATESTORE

Impala-DAEMON